Docker consul 容器服务自动发现和更新

news2024/9/25 21:23:27

目录

一、什么是服务注册与发现

二、Docker-consul集群

1.Docker-consul

consul提供的一些关键特性

2.registrator

3.Consul-template

三、Docker-consul实现过程

以配置nginx负载均衡为例

先配置consul-agent ，有两种模式server和client

四、Docker-consul集群配置

下载consul服务

常用启动选项

web服务器启动多例nginx容器，使用registrator自动发现

启动多例nginx容器

安装使用registrator自动发现 

前端查看，已经发现到

使用nginx做反向代理，使用Consul-template配置自动修改配置文件

先下载开启nginx服务

下载consul-template

四层代理配置

使用模板文件启用template（前台启动，后台启动加上 &）

再开一个终端登入查看，配置文件自动修改成功

添加页面，访问测试，看是否轮询

七层代理配置

编写模板文件

启动服务并访问测试

添加docker-consul节点

查看consul集群信息

一、什么是服务注册与发现

服务注册与发现是微服务架构中不可或缺的重要组件。起初服务都是单节点的，不保障高可用性，也不考虑服务的压力承载，服务之间调用单纯的通过接口访问。直到后来出现了多个节点的分布式架构，起初的解决手段是在服务前端负载均衡，这样前端必须要知道所有后端服务的网络位置，并配置在配置文件中。这里就会有几个问题

如果需要调用后端服务A-N，就需要配置N个服务的网络位置，配置很麻烦。
后端服务的网络位置变化，都需要改变每个调用者的配置。
        既然有这些问题，那么服务注册与发现就是解决这些问题的。后端服务A-N可以把当前自己的网络位置注册到服务发现模块，服务发现就以K-V的方式记录下来，K一般是服务名，V就是IP:PORT。服务发现模块定时的进行健康检查，轮询查看这些后端服务能不能访问的了。前端在调用后端服务A-N的时候，就跑去服务发现模块问下它们的网络位置，然后再调用它们的服务。这样的方式就可以解决上面的问题了，前端完全不需要记录这些后端服务的网络位置，前端和后端完全解耦！

二、Docker-consul集群

1.Docker-consul

consul是google开源的一个使用go语言开发的服务管理软件。支持多数据中心、分布式高可用的、服务发现和配置共享。采用Raft算法，用来保证服务的高可用。内置了服务注册与发现框架、分布一致性协议实现、健康检查、Key/Value存储、多数据中心方案，不再需要依赖其他工具（比如ZooKeeper等）。

        服务部署简单，只有一个可运行的二进制的包。每个节点都需要运行agent，他有两种运行模式server 和 client。 每个数据中心官方建议需要3或5个server节点以保证数据安全，同时保证server-leader的选举能够正确的进行。

        在client模式下，所有注册到当前节点的服务会被转发到server节点，本身是不持久化这些信息。

        在server模式下，功能和client模式相似，唯一不同的是，它会把所有的信息持久化到本地，这样遇到故障，信息是可以被保留的。server-leader是所有server节点的老大，它和其它server节点不同的是，它需要负责同步注册的信息给其它的server节点，同时也要负责各个节点的健康监测。

consul提供的一些关键特性

服务注册与发现：consul通过DNS或者HTTP接口使服务注册和服务发现变的很容易，一些外部服务，例如saas提供的也可以一样注册。

健康检查：健康检测使consul可以快速的告警在集群中的操作。和服务发现的集成，可以防止服务转发到故障的服务上面。

Key/Value存储：一个用来存储动态配置的系统。提供简单的HTTP接口，可以在任何地方操作。

多数据中心：无需复杂的配置，即可支持任意数量的区域。

        安装consul是用于服务注册，也就是容器本身的一些信息注册到consul里面，其他程序可以通过consul获取注册的相关服务信息，这就是服务注册与发现。 

2.registrator

Gliderlabs/Registrator 可检查容器运行状态自动注册，还可注销 docker 容器的服务到服务配置中心。目前支持 Consul、Etcd 和 SkyDNS2。

3.Consul-template

Consul-Template是基于Consul的自动替换配置文件的应用。Consul-Template是一个守护进程，用于实时查询Consul集群信息，并更新文件系统上任意数量的指定模板，生成配置文件。更新完成以后，可以选择运行 shell 命令执行更新操作，然后重新加载服务配置。

        Consul-Template可以查询Consul中的服务目录、Key、Key-values 等。这种强大的抽象功能和查询语言模板可以使 Consul-Template 特别适合动态的创建配置文件。例如：创建Apache/Nginx Proxy Balancers 、 Haproxy Backends等。

三、Docker-consul实现过程

以配置nginx负载均衡为例

先配置consul-agent ，有两种模式server和client

  • consul_client 收集自动发现的信息，将所有需要注册的信息转发到server节点，不持久化这些信息。
  • consul_server 持久化所有信息到本地，通过server-leader将信息同步给其它的server节点，以及各个节点的健康监测。

再通过registrator发现应用的网络位置，并发送给 consul agent 的自动发现模块进行注册

consul-template再基于consul的注册的信息自动替换服务的配置文件（需要编写模板）

四、Docker-consul集群配置

下载consul服务

#解压软件后移动到/usr/local/bin/下
mv consul /usr/local/bin/
#创建数据目录，启动服务
mkdir /var/lib/consul_data
consul agent \
-server \
-bootstrap \
-ui \
-data-dir=/var/lib/consul_data \
-bind=192.168.116.70 \
-client=0.0.0.0 \
-node=consul-server01 &> /var/log/consul.log &

常用启动选项

选项作用
-server以server身份启动。默认是client
-bootstrap用来控制一个server是否在bootstrap模式，在一个数据中心中只能有一个server处于bootstrap模式，当一个server处于 bootstrap模式时，可以自己选举为 server-leader
-bootstrap-expect=2集群要求的最少server数量，当低于这个数量，集群即失效。
-ui指定开启 UI 界面，这样可以通过 http://localhost:8500/ui 这样的地址访问 consul 自带的 web UI 界面。
-data-dir指定数据存储目录。
-bind指定用来在集群内部的通讯地址，集群内的所有节点到此地址都必须是可达的，默认是0.0.0.0。
-client指定 consul 绑定在哪个 client 地址上，这个地址提供 HTTP、DNS、RPC 等服务，默认是 127.0.0.1。
-node节点在集群中的名称，在一个集群中必须是唯一的，默认是该节点的主机名。
-datacenter指定数据中心名称，默认是dc1。

启动consul后默认会监听5个端口：
        8300：replication、leader farwarding的端口
        8301：lan cossip的端口
        8302：wan gossip的端口
        8500：web ui界面的端口
        8600：使用dns协议查看节点信息的端口

web服务器启动多例nginx容器，使用registrator自动发现

启动多例nginx容器

安装使用registrator自动发现 

docker run -d \
--name=registrator \
--net=host \
-v /var/run/docker.sock:/tmp/docker.sock \
--restart=always \
gliderlabs/registrator:latest \
--ip=192.168.116.60 \
consul://192.168.116.70:8500

前端查看，已经发现到

使用nginx做反向代理，使用Consul-template配置自动修改配置文件

先下载开启nginx服务

#配置nginx官方源，下载并开启
vim /etc/yum.repos.d/nginx.repo
[nginx-stable]
name=nginx stable repo
baseurl=http://nginx.org/packages/centos/7/$basearch/
gpgcheck=0
enabled=1
 
yum install nginx -y
systemctl enable --now nginx

下载consul-template

四层代理配置

yum安装的nginx有两个配置文件，/etc/nginx/nginx.conf 包含了全局配置、events块和http块的配置，/etc/nginx/conf.d/default.conf包含了server块的配置。

因为四层代理是在全局配置中做的，所以在nginx全局配置中引用

之后编写template模板文件，用于生成和自动修改上一步引用的nginx配置文件

#模板文件以ctmpl结尾！
vim nginx.ctmpl
stream {
    upstream nginx_backend {
        #获取consul的nginx服务范围
        {{range service "nginx"}}
        server {{.Address}}:{{.Port}};
        {{end}}
    }
 
    server {
        listen 9090;
        proxy_pass nginx_backend;
    }
}

使用模板文件启用template（前台启动，后台启动加上 &）

consul-template --consul-addr 192.168.116.70:8500 \
--template "/opt/consul/nginx.ctmpl:/etc/nginx/template/stream.conf:/usr/sbin/nginx -s reload" \
--log-level=info

再开一个终端登入查看，配置文件自动修改成功

添加页面，访问测试，看是否轮询

七层代理配置

编写模板文件

vim nginx2.ctmpl
upstream nginx_backend {
    #获取consul的nginx服务范围
    {{range service "nginx"}}
    server {{.Address}}:{{.Port}};
    {{end}}
}
 
server {
    listen 9090;
    location / {
        root /usr/share/nginx/html;
        index index.html;
        proxy_pass http://nginx_backend;
        proxy_set_header HOST $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header Client-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
 
    }
}

还需要把 /etc/nginx/conf.d/default.conf 中的 location / {} 配置注释，否则会和新生成的location / {} 配置起

冲突。

启动服务并访问测试

七层代理的配置在http模块中，所以这里生成的配置文件应该在/etc/nginx/conf.d/下

添加docker-consul节点

与节点一样先下载consul服务

然后启用consul节点，并加入第一个集群

consul agent \
-server \
-ui \
-data-dir=/var/lib/consul-data \
-bind=192.168.116.60 \
-client=0.0.0.0 \
-node=consul-server02 \
-enable-script-checks=true  \
-datacenter=dc1  \
-join 192.168.116.70 &> /var/log/consul.log &

查看consul集群信息

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/957817.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

Qt Graphics View

Qt Graphics View

Graphics View框架 在 Qt 中，Graphics View Framework（场景视图框架）是用于创建和管理可交互的 2D 图形界面的强大工具。它提供了以下主要的类和概念： QGraphicsScene（场景）：QGraphicsScene 是…
阅读更多...
【lucky-canvas插件】在Vue3实现大转盘九宫格老虎机抽奖

【lucky-canvas插件】在Vue3实现大转盘九宫格老虎机抽奖

目录 前言 一、lucky-canvas介绍 二、lucky-canvas使用（Vue3） 1. 安装 2. 注册 3. 使用 三、九宫格为例的具体使用 1. 组件使用 2. 常用配置 ① blocks 背景 ② prizes 奖品 ③ buttons 抽奖按钮 3. 回调函数 ① start 开始抽奖前 ② end …
阅读更多...
【Flask】from flask_sqlalchemy import SQLAlchemy报错

【Flask】from flask_sqlalchemy import SQLAlchemy报错

【可能出现的情况】 1、未安装 Flask-SQLAlchemy： 在使用 flask_sqlalchemy 之前，你需要确保已经通过 pip 安装了 Flask-SQLAlchemy。可以通过以下命令安装它： pip install Flask-SQLAlchemy 2、包名大小写问题： Python 是区分大…
阅读更多...
css让多个盒子强制自动等宽

css让多个盒子强制自动等宽

1.width: calc( 100 / n% ) 2.display:flex; flex:1;width:100px; 3.display:grid;grid-template-columns: repeat(auto-fit, minmax(100px, 1fr)); 但是其中某一个内容较长的时候 会破坏1:1:1的平衡 这个时候发现附件名字过长导致不等比例，通过查看阮一峰flex文…
阅读更多...
《人生苦短，我学Python》——布尔类型 比较运算 逻辑运算

《人生苦短，我学Python》——布尔类型 比较运算 逻辑运算

👈前三天，我们学了字符串、整型、浮点型这三种数据类型。今天我们将学习最后一种数据类型：布尔型。简单来说，布尔型就是“真”（True）和“假”（False）。下面就让我们来详细看看吧&…
阅读更多...
13.动态渲染侧边栏

13.动态渲染侧边栏

为什么要动态渲染？ 比如我们现在需要以下侧边栏的数据： 如果一个个的去写标签会很麻烦，发现导航栏中的数据分为两类，一类是一级导航，另一位是二级导航（有子页），因此直接写两个函数判…
阅读更多...
Docker从认识到实践再到底层原理（二-1）｜容器技术发展史+虚拟化容器概念和简介

Docker从认识到实践再到底层原理（二-1）｜容器技术发展史+虚拟化容器概念和简介

前言 那么这里博主先安利一些干货满满的专栏了！ 首先是博主的高质量博客的汇总，这个专栏里面的博客，都是博主最最用心写的一部分，干货满满，希望对大家有帮助。 高质量博客汇总 然后就是博主最近最花时间的一个专栏…
阅读更多...
20230831工作心得：SQL这块花了挺多时间

20230831工作心得：SQL这块花了挺多时间

1、SQL语句的问题 1、SQL这块花了挺多时间 1、理解业务 要之前自己要查什么数据，再去写SQL，这句话看起来像一句废话，但是很多时候，不知道自己在干嘛。 2、时间 1、需要查询哪个时间字段 表里有很多time有create_time&#…
阅读更多...
【2】openGL shader着色器分析三角形填色

【2】openGL shader着色器分析三角形填色

源代码在下面。文档查询 > docs.gl 结果展示：使用自己的shader和打印错误描述 该篇主要在上一部分代码的基础上添加了自己写的shader，即着色器。最常用的两个着色器 vertex shader 和 fragment shader，即顶点着色器和片段着色器。 大概…
阅读更多...
嵌入式行业——选择比努力重要

嵌入式行业——选择比努力重要

嵌入式开发可以说是一个较大的类别，也可以看作是应用技术的一种广义称谓。它在不同的工业和行业场景中应用不同的业务模式和领域。 举个例子，嵌入式技术结合基站通信技术，就构成了华为基站；嵌入式技术结合视频处理/图像处理技术&a…
阅读更多...
如何使用CSS实现一个响应式图片幻灯片（Responsive Image Slider）效果？

如何使用CSS实现一个响应式图片幻灯片（Responsive Image Slider）效果？

聚沙成塔每天进步一点点 ⭐ 专栏简介⭐ 响应式图片幻灯片⭐ HTML结构⭐ CSS样式⭐ JavaScript交互⭐ 写在最后 ⭐ 专栏简介 前端入门之旅：探索Web开发的奇妙世界 记得点击上方或者右侧链接订阅本专栏哦 几何带你启航前端之旅 欢迎来到前端入门之旅！这个…
阅读更多...
快速排序（Quit Sort）

快速排序（Quit Sort）

C自学精简教程 目录(必读) 快速排序 每次都把数据分成左右两部分，左边的小于某个数，右边的大于某个数。 递归操作左侧和右侧，最终完成所有数据的排序。 输入数据 72 6 57 88 60 42 83 73 48 85 执行过程 快速排序，选取位于…
阅读更多...
【100天精通python】Day50：python web编程_web框架，Flask的使用

【100天精通python】Day50：python web编程_web框架，Flask的使用

目录 1 Web 框架 2 python 中常用的web框架 3 Flask 框架的使用 3.1 Flask框架安装 3.2 第一个Flask程序 3.3 路由 3.3.1 基本路由 3.3.2 动态路由 3.3.3 HTTP 方法 3.3.4 多个路由绑定到一个视图函数 3.3.5 访问URL 参数的路由 3.3.6 带默认值的动态路由 3.3.7 带…
阅读更多...
成都智慧企业发展研究院总经理郑小华：践行双轮驱动，为能源电力数智化注入新活力丨数据猿专访...

成都智慧企业发展研究院总经理郑小华：践行双轮驱动，为能源电力数智化注入新活力丨数据猿专访...

大数据产业创新服务媒体 ——聚焦数据 改变商业 随着全球经济走向数字化，中国正处于这一浪潮的前沿，进行前所未有的技术与产业深度融合。政府在2023年2月印发的《数字中国建设整体布局规划》等政策下，明确展示了对数字经济的支持与鼓励&…
阅读更多...
虚拟机Ubuntu20.04 网络连接器图标开机不显示怎么办

虚拟机Ubuntu20.04 网络连接器图标开机不显示怎么办

执行以下指令： sudo service network-manager stop sudo rm /var/lib/NetworkManager/NetworkManager.state sudo service network-manager start
阅读更多...
SPSS统计作图教程：频率多边形

SPSS统计作图教程：频率多边形

SPSS统计作图教程：频率多边形 1、问题与数据 某研究者想了解某数据集中最大携氧能力（VO2max）是否服从正态分布，部分数据如图1。研究者应如何绘图查看呢？ 图1 部分数据 2、对问题的分析 研究者想绘图展示最大携氧能…
阅读更多...
Collections.singletonList、Arrays.asList与ImmutableList.of

Collections.singletonList、Arrays.asList与ImmutableList.of

文章目录 ListArrayListLinkedListArrayList与LinkedList的区别快速构建list集合Collections.singletonListArrays.asListImmutableList.of Java集合类型有三种：set(集)、list(列表)和map(映射)，而List集合是很常用的一种集合类型， List 我…
阅读更多...
【算法训练-模拟 一】模拟设计LRU缓存结构

【算法训练-模拟 一】模拟设计LRU缓存结构

废话不多说，喊一句号子鼓励自己：程序员永不失业，程序员走向架构！本篇Blog的主题是LRU缓存结构设计，这类题目出现频率还是很高的，几乎所有大厂都常考。 当然面对这道题，首先要讲清楚LRU是干什么…
阅读更多...
使用环境中的视觉地标和扩展卡尔曼滤波器定位移动机器人研究（Matlab代码实现）

使用环境中的视觉地标和扩展卡尔曼滤波器定位移动机器人研究（Matlab代码实现）

💥💥💞💞欢迎来到本博客❤️❤️💥💥 🏆博主优势：🌞🌞🌞博客内容尽量做到思维缜密，逻辑清晰，为了方便读者。 ⛳️座右铭&a…
阅读更多...
go学习part19(3)协程求素数

go学习part19(3)协程求素数

1.代码 intChan存放原始数据 primeChan存放检验之后的素数 exitChan存放几个协程的状态 package mainimport ("fmt""time" )/* 求素数 */ //放入1-8000个数 func putNum(intChan chan int) {for i : 2; i < 8000; i {intChan <- i}//关闭intChanc…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023