[docker] Docker容器服务更新与发现之consul

一、consul的相关知识

1.1 什么是注册与发现

服务注册与发现是微服务架构中不可或缺的重要组件。起初服务都是单节点的，不保障高可用性，也不考虑服务的压力承载，服务之间调用单纯的通过接口访问。直到后来出现了多个节点的分布式架构，起初的解决手段是在服务前端负载均衡，这样前端必须要知道所有后端服务的网络位置，并配置在配置文件中。这里就会有几个问题：
●如果需要调用后端服务A-N，就需要配置N个服务的网络位置，配置很麻烦
●后端服务的网络位置变化，都需要改变每个调用者的配置

既然有这些问题，那么服务注册与发现就是解决这些问题的。后端服务A-N可以把当前自己的网络位置注册到服务发现模块，服务发现就以K-V的方式记录下来，K一般是服务名，V就是IP:PORT。服务发现模块定时的进行健康检查，轮询查看这些后端服务能不能访问的了。前端在调用后端服务A-N的时候，就跑去服务发现模块问下它们的网络位置，然后再调用它们的服务。这样的方式就可以解决上面的问题了，前端完全不需要记录这些后端服务的网络位置，前端和后端完全解耦！

1.2 什么是consul 

consul是google开源的一个使用go语言开发的服务管理软件。支持多数据中心、分布式高可用的、服务发现和配置共享。采用Raft算法，用来保证服务的高可用。内置了服务注册与发现框架、分布一致性协议实现、健康检查、Key/Value存储、多数据中心方案，不再需要依赖其他工具（比如ZooKeeper等）。服务部署简单，只有一个可运行的二进制的包。每个节点都需要运行agent，他有两种运行模式server 和 client。 每个数据中心官方建议需要3或5个server节点以保证数据安全，同时保证server-leader的选举能够正确的进行。

在client模式下，所有注册到当前节点的服务会被转发到server节点，本身是不持久化这些信息。

在server模式下，功能和client模式相似，唯一不同的是，它会把所有的信息持久化到本地，这样遇到故障，信息是可以被保留的。

server-leader是所有server节点的老大，它和其它server节点不同的是，它需要负责同步注册的信息给其它的server节点，同时也要负责各个节点的健康监测。

consul提供的一些关键特性：
服务注册与发现：consul通过DNS或者HTTP接口使服务注册和服务发现变的很容易，一些外部服务，例如saas提供的也可以一样注册。


健康检查：健康检测使consul可以快速的告警在集群中的操作。和服务发现的集成，可以防止服务转发到故障的服务上面。


Key/Value存储：一个用来存储动态配置的系统。提供简单的HTTP接口，可以在任何地方操作。
多数据中心：无需复杂的配置，即可支持任意数量的区域。

安装consul是用于服务注册，也就是容器本身的一些信息注册到consul里面，其他程序可以通过consul获取注册的相关服务信息，这就是服务注册与发现。

1.3 zookeeper和consul的区别 

zookeeper使用临时节点特性来用于服务发现（当服务断开时，临时节点删除）这种服务发现机制比心跳检测更精致，复杂，但是同样也有一些固有的扩展性问题和增加客户端复杂性，所有的服务端都必须维持同zookeeper的活动连接。

consul的服务发现机制：Consul在集群的每一个节点都运行一个客户端，这些客户端就是 gossip pool（分布式健康检查 分布式健康检查）的一部分，gossip协议实现在服务宕机发现上很高效，无论服务集群中服务数多少，Consul可以通过简单的检查服务返回200状态来进行健康检查。

对比的项目consulzookeeper
一致性协议cp模型cp模型
健康检查TCP/HTTP/gRPC/CmdKeepAlive
负载均衡策略Fabio-
雪崩保护无无
自动注销实例不支持支持
访问协议HTTP/DNSTCP
监听支持支持支持
多数据中心支持不支持
跨注册中心同步支持不支持
SpringCloud集成支持不支持
Dubbo集成不支持支持
K8s集成支持不支持

二、consul 部署 

服务器IP主要作用
consul服务器192.168.136.198运行consul服务、nginx服务、consul-template守护进程
registrator服务器    192.168.136.150运行registrator容器、运行nginx容器

2.1 部署consul服务器  

systemctl stop firewalld.service
setenforce 0-------- consul服务器 --------
1. 建立 Consul 服务
mkdir /opt/consul
cp consul_0.9.2_linux_amd64.zip /opt/consul
cd /opt/consul
unzip consul_0.9.2_linux_amd64.zip
mv consul /usr/local/bin///设置代理，在后台启动 consul 服务端
consul agent \
-server \
-bootstrap \
-ui \
-data-dir=/var/lib/consul-data \
-bind=192.168.80.15 \
-client=0.0.0.0 \
-node=consul-server01 &> /var/log/consul.log &----------------------------------------------------------------------------------------------------------
-server： 以server身份启动。默认是client。
-bootstrap ：用来控制一个server是否在bootstrap模式，在一个数据中心中只能有一个server处于bootstrap模式，当一个server处于 bootstrap模式时，可以自己选举为 server-leader。
-bootstrap-expect=2 ：集群要求的最少server数量，当低于这个数量，集群即失效。
-ui ：指定开启 UI 界面，这样可以通过 http://localhost:8500/ui 这样的地址访问 consul 自带的 web UI 界面。
-data-dir ：指定数据存储目录。
-bind ：指定用来在集群内部的通讯地址，集群内的所有节点到此地址都必须是可达的，默认是0.0.0.0。
-client ：指定 consul 绑定在哪个 client 地址上，这个地址提供 HTTP、DNS、RPC 等服务，默认是 127.0.0.1。
-node ：节点在集群中的名称，在一个集群中必须是唯一的，默认是该节点的主机名。
-datacenter ：指定数据中心名称，默认是dc1。
----------------------------------------------------------------------------------------------------------netstat -natp | grep consul

consul agent -server -bootstrap -ui -data-dir=/opt/consul/data -bind=192.168.136.198 -client=0.0.0.0 -node=consul-server01 &> /opt/consul/logs/consul.log &

 

2. 查看集群信息
#查看members状态
consul members
#查看集群状态
consul operator raft list-peersconsul info | grep leader

3. 通过 http api 获取集群信息
curl 127.0.0.1:8500/v1/status/peers 			#查看集群server成员
curl 127.0.0.1:8500/v1/status/leader			#集群 server-leader
curl 127.0.0.1:8500/v1/catalog/services			#注册的所有服务
curl 127.0.0.1:8500/v1/catalog/nginx			#查看 nginx 服务信息
curl 127.0.0.1:8500/v1/catalog/nodes			#集群节点详细信息

 

2.2 registrator服务器   

//容器服务自动加入 Nginx 集群
1. 安装 Gliderlabs/Registrator
Gliderlabs/Registrator 可检查容器运行状态自动注册，还可注销 docker 容器的服务到服务配置中心。目前支持 Consul、Etcd 和 SkyDNS2。docker run -d \
--name=registrator \
--net=host \
-v /var/run/docker.sock:/tmp/docker.sock \
--restart=always \
gliderlabs/registrator:latest \
--ip=192.168.136.150 \
consul://192.168.136.198:8500----------------------------------------------------------------------------------------------------------
--net=host ：把运行的docker容器设定为host网络模式。
-v /var/run/docker.sock:/tmp/docker.sock ：把宿主机的Docker守护进程(Docker daemon)默认监听的Unix域套接字挂载到容器中。
--restart=always ：设置在容器退出时总是重启容器。
--ip ：刚才把network指定了host模式，所以我们指定ip为宿主机的ip。
consul ：指定consul服务器的IP和端口。
----------------------------------------------------------------------------------------------------------

 

2. 测试服务发现功能是否正常
yum -y install nginx
docker run -d -p 9526:80 --name n1 nginx:1.24
docker run -d -p 9527:80 --name n2 nginx:1.24
docker run -d -p 9528:80 --name n3 nginx:1.24
docker run -d -p 9529:80 --name n4 nginx:1.24


3. 验证 http 和 nginx 服务是否注册到 consul
浏览器中，输入 http://192.168.73.105:8500，在 Web 页面中“单击 NODES”，然后单击“consurl-server01”，会出现 5 个服务。//在consul服务器使用curl测试连接服务器
curl 127.0.0.1:8500/v1/catalog/services

三、consul-template 的引入 

3.1  consul-template的作用

 Consul-Template是基于Consul的自动替换配置文件的应用。Consul-Template是一个守护进程，用于实时查询Consul集群信息，并更新文件系统上任意数量的指定模板，生成配置文件。更新完成以后，可以选择运行 shell 命令执行更新操作，重新加载 Nginx。

Consul-Template可以查询Consul中的服务目录、Key、Key-values 等。这种强大的抽象功能和查询语言模板可以使 Consul-Template 特别适合动态的创建配置文件。例如：创建Apache/Nginx Proxy Balancers 、 Haproxy Backends等。

3.2  consul-template的具体部署运用

（1）准备 template nginx 模板文件
vim nginx.ctmplupstream nginx-backend {{{range service "nginx"}}server {{.Address}}:{{.Port}};{{end}}
}

（2） 安装配置 nginx 
yum -y install nginx
vim /etc/nginx/nginx.confuser  nginx;
worker_processes  auto;error_log  /var/log/nginx/error.log notice;
pid        /var/run/nginx.pid;events {worker_connections  1024;
}http {include /etc/nginx/consul.conf;include       /etc/nginx/mime.types;default_type  application/octet-stream;log_format  main  '$remote_addr - $remote_user [$time_local] "$request" ''$status $body_bytes_sent "$http_referer" ''"$http_user_agent" "$http_x_forwarded_for"';access_log  /var/log/nginx/access.log  main;sendfile        on;#tcp_nopush     on;keepalive_timeout  65;#gzip  on;include /etc/nginx/conf.d/*.conf;}vim /etc/nginx/conf.d/default.confserver {listen       80;server_name  localhost;#access_log  /var/log/nginx/host.access.log  main;location / {#root   /usr/share/nginx/html;#index  index.html index.htm;proxy_set_header HOST $host;proxy_set_header X-Real-IP $remote_addr;proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;proxy_pass http://nginx-backend;}#error_page  404              /404.html;# redirect server error pages to the static page /50x.html#error_page   500 502 503 504  /50x.html;location = /50x.html {root   /usr/share/nginx/html;}# proxy the PHP scripts to Apache listening on 127.0.0.1:80##location ~ \.php$ {#    proxy_pass   http://127.0.0.1;#}# pass the PHP scripts to FastCGI server listening on 127.0.0.1:9000##location ~ \.php$ {#    root           html;#    fastcgi_pass   127.0.0.1:9000;#    fastcgi_index  index.php;#    fastcgi_param  SCRIPT_FILENAME  /scripts$fastcgi_script_name;#    include        fastcgi_params;#}# deny access to .htaccess files, if Apache's document root# concurs with nginx's one##location ~ /\.ht {#    deny  all;#}
}

 

（3） 配置并启动 template
unzip consul-template_0.19.3_linux_amd64.zip -d /opt/
cd /opt/
mv consul-template /usr/local/bin///在前台启动 template 服务，启动后不要按 ctrl+c 中止 consul-template 进程。
consul-template --consul-addr 192.168.136.198:8500 --template "/opt/consul-template/nginx.ctmpl:/etc/nginx/consul.conf:/usr/sbin/nginx -s reload" --log-level=info

（4）访问 template-nginx 
#在registrator主机中docker ps -adocker exec -it n1 bash
echo "this is test1 web" > /usr/share/nginx/html/index.htmldocker exec -it n2 bash
echo "this is test2 web" > /usr/share/nginx/html/index.html浏览器访问：http://192.168.136.198:80/ ，并不断刷新。

四、consul 多节点部署 

 
//添加一台已有docker环境的服务器192.168.73.107/24加入已有的群集中
#通过sever1（192.168.73.105）将consul执行文件传送给新的服务端scp consul 192.168.136.150:`pwd`   #192.168.136.198的操作
scp consul 192.168.136.197:`pwdmkdir -p /opt/consul/{data,logs}consul agent -server -ui -data-dir=/opt/consul/data -bind=192.168.136.150 -client=0.0.0.0 -node=consul-server02  -enable-script-checks=true -datacenter=dc1 -join 192.168.136.198 &> /opt/consul/logs/consul.log &consul agent -server -ui -data-dir=/opt/consul/data -bind=192.168.136.197 -client=0.0.0.0 -node=consul-server03  -enable-script-checks=true -datacenter=dc1 -join 192.168.136.198 &> /opt/consul/logs/consul.log &------------------------------------------------------------------------
-enable-script-checks=true ：设置检查服务为可用
-datacenter : 数据中心名称
-join ：加入到已有的集群中
------------------------------------------------------------------------consul membersconsul operator raft list-peers

 

 

脱离consul集群的方法 
 consul leave

 

 

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.hqwc.cn/news/441452.html

如若内容造成侵权/违法违规/事实不符，请联系编程知识网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

走迷宫-bfs

走迷宫-bfs

package Test;import java.io.BufferedReader; import java.io.IOException; import java.io.InputStreamReader;public class Main {static int N 110,hh 0,tt -1,n,m;static int[][] g new int[N][N]; //用来存储迷宫static int[][] d new int[N][N]; //用来存储d[i…
阅读更多...
【送书福利-第三十期】《Java面试八股文：高频面试题与求职攻略一本通》

【送书福利-第三十期】《Java面试八股文：高频面试题与求职攻略一本通》

内容简介 本书将碎片化的Java面试八股文知识点系统化、结构化，精选了近200道经典高频的八股文面试题，整理了近20个经典高频的实战场景解决方案，准备了10多个面试简历实操技巧。每道面试题都标注了难度指数、考查频率、开发年限和匹配岗位等&…
阅读更多...
c++之说_9_6|自定义类型 struct operator 重载运算符关键字

c++之说_9_6|自定义类型 struct operator 重载运算符关键字

c中 struct 和 class 特性几乎一模一样 所以很多都是共有的特性 篇幅就很多了 c中 我觉得最牛皮的概念之一 就是 重载运算符 operator 关键字 这个东西 能将 我们的 运算符 （-*/） new delete 类型转换 写在类里面当成员函数 并制定 该类型变…
阅读更多...
手机屏幕生产厂污废水处理需要哪些工艺设备

手机屏幕生产厂污废水处理需要哪些工艺设备

随着手机行业的快速发展，手机屏幕生产厂的规模也越来越大，但同时也带来了大量的污废水排放问题。为了保护环境和人类的健康，手机屏幕生产厂需要采取适当的工艺设备来处理污废水。本文将介绍手机屏幕生产厂污废水处理所需的工艺设备。 首先&am…
阅读更多...
数据据库八之 视图、触发器、事务

数据据库八之 视图、触发器、事务

【零】准备数据 【1】创建表 （1）部门表 d_id是部门的编号d_name是部门的名字 # 确保表不存在 drop table if exists department; # 创建表 create table department( d_id int auto_increment primary key, d_name varchar(6) )auto_increment 501 …
阅读更多...
CSS之webkit内核中的属性text-stroke

CSS之webkit内核中的属性text-stroke

让我为大家介绍一下text-stroke 大家是否想过要弄一个描边过的文字&#xff0c;接下来&#xff0c;text-stroke就可以为你解决 text-stroke是一个复合属性&#xff0c;里面有两个参数&#xff1a;描边的尺寸 描边的颜色 <!DOCTYPE html> <html lang"en">…
阅读更多...
【服务端性能测试】性能测试策略如何做

【服务端性能测试】性能测试策略如何做

一、需求收集 先需要确认本次测试目的是什么&#xff0c;然后再看我们需要用什么参数来判断这个目的是否能够达成。 1.1 业务性能指标参考&#xff1a; TPS、QPS、RT、请求成功率&#xff08;一般请求成功率>99.99%&#xff09; 1.2 硬件性能指标参考&#xff1a; 即服…
阅读更多...
【React】前端项目引入阿里图标

【React】前端项目引入阿里图标

【React】前端项目引入阿里图标 1、登录自己的iconfont-阿里巴巴矢量图标库&#xff0c;把需要的图标加入到自己的项目中去&#xff1b;2、加入并进入到项目中去选择Symbol点击复制代码3、安装ant-design/icons4. 新建一个MyIcon.js文件内容如下5、在项目中使用 1、登录自己的i…
阅读更多...
【PyTorch实战演练】Fast R-CNN中的RoI(Region of Interest)池化详解

【PyTorch实战演练】Fast R-CNN中的RoI(Region of Interest)池化详解

文章目录 0. 前言1. ROI池化的提出背景2. RoI池化的结构与工作原理3. RoI池化的作用及意义4. RoI使用示例 0. 前言 按照国际惯例&#xff0c;首先声明&#xff1a;本文只是我自己学习的理解&#xff0c;虽然参考了他人的宝贵见解及成果&#xff0c;但是内容可能存在不准确的地方…
阅读更多...
【Java程序设计】【C00176】基于SSM的图书管理系统（论文+PPT）

【Java程序设计】【C00176】基于SSM的图书管理系统（论文+PPT）

基于SSM的图书管理系统&#xff08;论文PPT&#xff09; 项目简介项目获取开发环境项目技术运行截图 项目简介 这是一个基于ssm的图书管理系统 本系统分为前台系统、后台管理员以及后台学员3个功能模块。 前台系统&#xff1a;当游客打开系统的网址后&#xff0c;首先看到的就…
阅读更多...
Vim实战：使用 Vim实现图像分类任务（二）

Vim实战：使用 Vim实现图像分类任务（二）

文章目录 训练部分导入项目使用的库设置随机因子设置全局参数图像预处理与增强读取数据设置Loss设置模型设置优化器和学习率调整策略设置混合精度&#xff0c;DP多卡&#xff0c;EMA定义训练和验证函数训练函数验证函数调用训练和验证方法 运行以及结果查看测试完整的代码 在上…
阅读更多...
【Delphi】IDE 工具栏错乱恢复

【Delphi】IDE 工具栏错乱恢复

由于经常会在4K和2K显示器上切换Delphi开发环境(IDE)&#xff0c;导致IDE工具栏错乱&#xff0c;咋样设置都无法恢复&#xff0c;后来看到红鱼儿的博客&#xff0c;说是通过操作注册表的方法&#xff0c;能解决&#xff0c;试了一下&#xff0c;果真好用&#xff0c;非常感谢分…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023