Docker--consul

最新推荐文章于 2024-09-05 08:34:04 发布
最新推荐文章于 2024-09-05 08:34:04 发布
阅读量1.5k 收藏
点赞数
分类专栏： docker 文章标签： java 运维 微服务
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/liqi23/article/details/129000415
版权
文章介绍了Consul作为服务发现和配置共享的工具，包括其主要特性、两种运行模式、关键服务如健康检查和Key/Value存储。在Docker环境下，Consul通过registrator自动注册容器服务，并利用consul-template动态更新Nginx配置实现负载均衡。此外，文章还展示了如何部署和扩展Consul集群，以及多节点配置。
摘要由CSDN通过智能技术生成

目录

前言

一、Consul 简介

1.1、 consul 概述

1.2 、consul 的两种模式

1.3、consul 提供的一些关键特性

二、Consul 容器服务更新与发现

三、consul 部署 

3.2、查看集群信息

四、registrator服务器

consul-template

五、consul 多节点

前言

服务注册与发现是微服务架构中不可或缺的重要功能。起初服务都是单节点的，不保障高可用性，也不考虑服务的压力承载，服务之间调用单纯的通过接口访问。直到后来出现了多个节点的分布式架构，起初的解决手段是在服务前端负载均衡，这样前端必须要知道所有后端服务的网络位置，并配置在配置文件中

一、Consul 简介

1.1、 consul 概述

consul 是 google 开源的一个使用 go 语言开发的服务管理软件。支持多数据中心、分布式高可用的、服务发现和配置共享。采用 Raft 算法，用来保证服务的高可用。内置了服务注册与发现框架、分布一致性协议实现、健康检查、Key/Value 存储、多数据中心方案，不再需要依赖其他工具（比如 ZooKeeper 等）。服务部署简单，只有一个可运行的二进制的包。每个节点都需要运行 agent，他有两种运行模式 server 和 client。 每个数据中心官方建议需要 3或 5 个 server 节点以保证数据安全，同时保证 server-leader 的选举能够正确的进行。

1.2 、consul 的两种模式

在 client 模式下，所有注册到当前节点的服务会被转发到 server 节点，本身是不持久化这些信息的。

在 server 模式下，功能和 client 模式相似，唯一不同的是，它会把所有的信息持久化到本地，这样遇到故障，信息是可以被保留的。

server-leader 是所有 server 节点的老大，它和其它 server 节点不同的是，它需要负责同步注册的信息给其它的 server 节点，同时也要负责各个节点的健康监测。

1.3、consul 提供的一些关键特性

  • 服务注册与发现：consul 通过 DNS 或者 HTTP 接口使服务注册和服务发现变的很容易，一些外部服务，例如 saas 提供的也可以一样注册。
  • 健康检查：健康检测使 consul 可以快速的告警在集群中的操作。和服务发现的集成，可以防止服务转发到故障的服务上面。
  • Key/Value 存储：一个用来存储动态配置的系统。提供简单的 HTTP 接口，可以在任何地方操作。
  • 多数据中心：无需复杂的配置，即可支持任意数量的区域。
  • 基于 Golong 语言，可移植性强。
  • 支持 ACL 访问控制。
  • 与 Docker 等轻量级容器可无缝配合。

二、Consul 容器服务更新与发现

两个 nginx 之间做 keepalived，访问的时候通过 httpd 的方式访问 keepalived，访问到 nginx 的主服务器，并且这个主服务器会代理给后端服务器上的 Container，Container 上面可以跑 tomcat/php/apache 等服务。

发现：Consul 会在 docker 服务器上安插一个眼线（registrator），它会自己去探测当前主机上容器的状态变化（增加和减少），并且可以自己去进行调整。当发现容器变化了以后，会把变化的信息告诉 consul 的 server 端并且注册到 consul 的 server 端，注册以后在 UI 界面可以在 web 网页里面查看节点的变化。

更新：Consul agent 控制 consul template 模板，使用 template 组件去和 nginx.conf 来进行对接，使用 template 这种方式来构建模板，模板里面都是变量，引用变量的方式去加载后端由 consul 注册到 server 端之后，server 会把这个信息告诉 agent，agent 会和 template 进行对接并写入 template 中，更新完以后它会作为 nginx.conf 的子配置文件被前端的 nginx 所识别，最后 consul agent 会控制 nginx 来进行 reload，reload 后会识别到 nginx.conf 配置文件中 upstream 池和 proxy_pass 信息的变化，也就是说可以识别后端的节点，这样就可以在地址池中动态的调整后端的资源。

三、consul 部署 

consul服务器192.168.239.60运行consul服务、nginx服务、consul-template守护进程
registrator服务器192.168.239.70运行registrator容器、运行nginx容器

 

#关闭防火墙
systemctl stop firewalld.service
setenforce 0

3.1、consul服务器 

#将consul软件包上传到/opt目录
mkdir /opt/consul  #创建工作目录
cp consul_0.9.2_linux_amd64.zip /opt/consul  
cd /opt/consul
unzip consul_0.9.2_linux_amd64.zip #解压
mv consul /usr/local/bin/  #优化路径史系统识别命令

设置代理，在后台启动 consul 服务端consul

consul agent \
-server \
-bootstrap \
-ui \
-data-dir=/var/lib/consul-data \
-bind=192.168.239.60 \
-client=0.0.0.0 \
-node=consul-server01 &> /var/log/consul.log &


-server： 以server身份启动。默认是client。
-bootstrap ：用来控制一个server是否在bootstrap模式，在一个数据中心中只能有一个server处于bootstrap模式，当一个server处于 bootstrap模式时，可以自己选举为 server-leader。
-bootstrap-expect=2 ：集群要求的最少server数量，当低于这个数量，集群即失效。
-ui ：指定开启 UI 界面，这样可以通过 http://localhost:8500/ui 这样的地址访问 consul 自带的 web UI 界面。
-data-dir ：指定数据存储目录。
-bind ：指定用来在集群内部的通讯地址，集群内的所有节点到此地址都必须是可达的，默认是0.0.0.0。
-client ：指定 consul 绑定在哪个 client 地址上，这个地址提供 HTTP、DNS、RPC 等服务，默认是 127.0.0.1。
-node ：节点在集群中的名称，在一个集群中必须是唯一的，默认是该节点的主机名。

-datacenter ：指定数据中心名称，默认是dc1。

netstat -natp | grep consul

启动consul后默认会监听5个端口：
8300：replication、leader farwarding的端口
8301：lan cossip的端口
8302：wan gossip的端口
8500：web ui界面的端口
8600：使用dns协议查看节点信息的端口

 

3.2、查看集群信息

查看members状态

consul members  #查看集群成员

 查看集群状态

consul operator raft list-peers   #查看当前集群状态
consul info | grep leader         #查看日志的方式查看集群leader节点

通过 http api 获取集群信息

curl 127.0.0.1:8500/v1/status/peers 			#查看集群server成员
curl 127.0.0.1:8500/v1/status/leader			#集群 server-leader
curl 127.0.0.1:8500/v1/catalog/services			#注册的所有服务
curl 127.0.0.1:8500/v1/catalog/nginx			#查看 nginx 服务信息
curl 127.0.0.1:8500/v1/catalog/nodes			#集群节点详细信息

 

四、registrator服务器

容器服务自动加入 Nginx 集群

安装 Gliderlabs/Registrator
Gliderlabs/Registrator 可检查容器运行状态自动注册，还可注销 docker 容器的服务到服务配置中心。目前支持 Consul、Etcd 和 SkyDNS2。

docker run -d \
--name=registrator \
--net=host \
-v /var/run/docker.sock:/tmp/docker.sock \
--restart=always \
gliderlabs/registrator:latest \
--ip=192.168.239.70 \
consul://192.168.239.60:8500

 

--net=host ：把运行的docker容器设定为host网络模式。
-v /var/run/docker.sock:/tmp/docker.sock ：把宿主机的Docker守护进程(Docker daemon)默认监听的Unix域套接字挂载到容器中。
--restart=always ：设置在容器退出时总是重启容器。
--ip ：刚才把network指定了host模式，所以我们指定ip为宿主机的ip。

consul ：指定consul服务器的IP和端口。

 

测试服务发现功能是否正常

docker run -itd -p:83:80 --name test-01 -h gb nginx
docker run -itd -p:84:80 --name test-02 -h gb1 nginx
docker run -itd -p:85:80 --name test-03 -h gb2 httpd	docker run -itd -p:86:80 --name test-04 -h gb3 httpd	
#-h：设置容器主机名

验证 http 和 nginx 服务是否注册到 consul

浏览器中，输入 http://192.168.239.60:8500，在 Web 页面中“单击 NODES”，然后单击“consurl-server01”，会出现 4个服务。

在consul服务器使用curl测试连接服务器

curl 127.0.0.1:8500/v1/catalog/services

consul-template

Consul-Template是基于Consul的自动替换配置文件的应用。Consul-Template是一个守护进程，用于实时查询Consul集群信息，并更新文件系统上任意数量的指定模板，生成配置文件。更新完成以后，可以选择运行 shell 命令执行更新操作，重新加载 Nginx。

Consul-Template可以查询Consul中的服务目录、Key、Key-values 等。这种强大的抽象功能和查询语言模板可以使 Consul-Template 特别适合动态的创建配置文件。例如：创建Apache/Nginx Proxy Balancers 、 Haproxy Backends等。

 

 

 通过consul-template配置实现nginx负载均衡的自动配置

#将软件包拉取opt目录进行解压
unzip consul-template_0.19.3_linux_amd64.zip

#优化路径让系统识别
mv consul-template /usr/local/bin/

 准备 template nginx 模板文件

#在consul服务器上操作

mkdir consul           #创建工作目录

vim nginx.ctmpl        #定义nginx upstream一个简单模板
upstream http_backend {
  {{range service "nginx"}}
server {{.Address}}:{{.Port}};
{{end}}
}
#定义一个server，监听8080端口，反向代理到upstream
server {
    listen 8080;
    server_name www.gb.com;
    access_log /var/log/nginx/kgc.com-access.log;
    index index.html index.php;
    location / {
        proxy_pass http://http_backend;
        proxy_set_header HOST $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header Client-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
}

 

yum安装nginx

准备nginx -yum源

cd /etc/yum.repos.d/

 vim nginx.repo
[nginx]
name=nginx repo
baseurl=http://nginx.org/packages/centos/7/$basearch/
gpgcheck=0
enabled=1
yum install nginx -y #安装
systemctl start nginx
netstat -natp |grep 80

 

 

启动 template

#在前台启动 template 服务，启动后不要按 ctrl+c 中止 consul-template 进程。
consul-template --consul-addr 192.168.239.60:8500 --template "/opt/consul/nginx.ctmpl:/etc/nginx/conf.d/gb-consul.conf:/usr/sbin/nginx -s reload" --log-level=info

#--consul-addr 指定consul的ip和端口号；8500既是UI界面端口也是管理服务端口
#/opt/consul/nginx.ctmpl：模板文件路径
#nginx/conf.d/gb-consul.conf：生成的配置文件的路径
#/usr/sbin/nginx -s reload：重载
#--log-level=info：日志的级别

 

另外打开一个终端查看生成配置文件

cat /etc/nginx/conf.d/gb-consul.conf

upstream http_backend {

server 192.168.239.70:83;

server 192.168.239.70:84;

}

server {
    listen 8080;
    server_name www.gb.com;
    access_log /var/log/nginx/gb.com-access.log;
    index index.html index.php;
    location / {
        proxy_pass http://http_backend;
        proxy_set_header HOST $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header Client-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
}

 

访问 template-nginx 

docker ps -a
CONTAINER ID   IMAGE                           COMMAND                  CREATED        STATUS       PORTS                               NAMES
ca49c5b1948e   httpd                           "httpd-foreground"       24 hours ago   Up 4 hours   0.0.0.0:86->80/tcp, :::86->80/tcp   test-04
2c1fbf05eae9   httpd                           "httpd-foreground"       24 hours ago   Up 4 hours   0.0.0.0:85->80/tcp, :::85->80/tcp   test-03
82eeea53ebca   nginx                           "/docker-entrypoint.…"   25 hours ago   Up 4 hours   0.0.0.0:84->80/tcp, :::84->80/tcp   test-02
682af3b7c713   nginx                           "/docker-entrypoint.…"   25 hours ago   Up 4 hours   0.0.0.0:83->80/tcp, :::83->80/tcp   test-01
6f8e0a158c62   gliderlabs/registrator:latest   "/bin/registrator --…"   25 hours ago   Up 4 hours                                       registrator
#进入nginx容器在站点目录写入文件
docker exec -it 682af3b7c713 bash
echo "this is test01 web" > /usr/share/nginx/html/index.html

docker exec -it 82eeea53ebca bash
echo "this is test02 web" > /usr/share/nginx/html/index.html

 

浏览器访问：http://192.168.239.60:8080/ ，并不断刷新。

 

增加一个 nginx 容器节点，测试服务发现及配置更新功能。

docker run -itd -p:85:80 --name test-05 -h test05 nginx

 

观察 template 服务，会从模板更新/etc/nginx/conf.d/gb-consul.conf文件内容，并且重载 nginx 服务。

#查看/etc/nginx/conf.d/gb-consul.conf 文件内容
cat /etc/nginx/conf.d/gb-consul.conf
upstream http_backend {

server 192.168.239.70:83;

server 192.168.239.70:84;

server 192.168.239.70:87;

}

 

查看第三胎 nginx 容器web站点目录写入文件，网页访问测试是否正常轮询到各个容器节点上

docker exec -it f6a8b57d3a52 bash

echo "this is test03 web" > /usr/share/nginx/html/index.html

浏览器访问：http://192.168.239.60:8080/ ，并不断刷新。 

 

 

五、consul 多节点

#将consul文件传输给50节点让系统识别consul命令
cd /usr/local/bin/
scp consul 192.168.239.50:`pwd`
#添加一台已有docker环境的服务器192.168.239.50/24加入已有的群集中
consul agent \
-server \
-ui \
-data-dir=/var/lib/consul-data \
-bind=192.168.239.50 \
-client=0.0.0.0 \
-node=consul-server02 \
-enable-script-checks=true  \
-datacenter=dc1  \
-join 192.168.239.60 &> /var/log/consul.log &

#################################################
-enable-script-checks=true ：设置检查服务为可用
-datacenter : 数据中心名称
-join ：加入到已有的集群中

#查看集群成员
consul members   
Node             Address              Status  Type    Build  Protocol  DC
consul-server01  192.168.239.60:8301  alive   server  0.9.2  2         dc1
consul-server02  192.168.239.50:8301  alive   server  0.9.2  2         dc1


#查看当前集群状态
consul operator raft list-peers    
Node             ID                   Address              State     Voter  RaftProtocol
consul-server01  192.168.239.60:8300  192.168.239.60:8300  leader    true   2
consul-server02  192.168.239.50:8300  192.168.239.50:8300  follower  true   2

 

Liq1
关注
专栏目录
Docker 管理之 --- consul 服务更新和发现
m0_59430185的博客
12-10 1425
文章目录前言一、Consul 简介1. consul 概述2. consul 的两种模式3. consul 提供的一些关键特性二、Consul 容器服务更新与发现三、Consul 部署1. 服务器配置2. consul 服务器2.1 安装 docker-ce，docker-compose2.2 建立 consul 服务2.3 查看群集信息2.4 通过 http api 获取群集信息3. registrator 服务器3.1 安装 Gliderlabs/Registrator3.2 测试服务发现功能是否正常3
docker-nginx-consul-template:Docker映像已安装nginx和consul模板
05-15
什么是docker-nginx-consul-template？ 带有nginx和consul模板的Docker映像，用于从consul动态更新其配置文件。 该镜像基于构建。 如何使用这张图片？ docker镜像是通过自动构建的。 在Dockerfile中 FROM yeasy/...
Docker-consul
rmh0713的博客
04-30 1613
服务注册与发现是微服务架构中不可或缺的重要组件，起初服务都是单节点的，不保障高可用性，也不考虑服务的压力承载，服务之间调用单纯的通过接口访问。知道后来出现了多个节点的分布式架构，起初的解决手段是在服务前端负载均衡，这样前端必须要知道所有后端服务的网络位置，并配置在配置文件中。这里就会出现几个问题：①如果需要调用后端服务A-N，就需要配置N个服务的网络位置，配置会很麻烦②后端服务的网络位置变化，都需要该百年每个调用者的配置。既然有这些问题，那么服务注册与发现就是解决这些问题的。
Docker安装及运行consul节点
最新发布
2401_86449979的博客
09-05 932
Docker是一个开源的应用容器引擎，基于Go语言并遵从Apache2.0协议开源。Docker可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中，然后发布到任何流行的Linux机器上，也可以实现虚拟化。容器是完全使用沙箱机制，相互之间不会有任何的接口，更重要的是容器性能开销很低。
docker-consul
tefuiryy的博客
03-31 4128
docker consul一、Consul概述1、consul简介2、consul特点3、docker consul容器服务更新与发现二、部署1、server部署（192.168.177.33）2、client部署（192.168.177.8）3、配置template模块自动更新4、测试访问代理服务器 一、Consul概述 1、consul简介 consul是一个服务发现和注册的工具，具有分布式、搞扩展性能特点。 2、consul特点 （1）支持健康检查，允许储存值对 （2）基于Golong语言，可移植性
【Docker六】Docker-consul
koeda1的博客
12-15 1527
docker-consul对服务的注册和发现、监控容器
consul-cluster_docker-compose:通过docker-compose的Consul集群开发环境
05-08
consul-cluster_docker-compose 概述 1-组件 基础Debian：挤压 主管流程管理 领事代理 用于沙箱的Debian Squeeze Base映像 易于定制 与Attached Shell一起使用更易于调试 入门 1-建立图像 docker build -t < YOUR> -...
docker-compose安装包
12-19
Docker-Compose项目是Docker官方的开源项目，负责实现对Docker容器集群的...一个服务当中可包括多个容器实例，Docker-Compose并没有解决负载均衡的问题，因此需要借助其它工具实现服务发现及负载均衡，比如 Consul。
docker-compose-linux-x86_64
09-21
一个服务当中可包括多个容器实例，Docker-Compose并没有解决负载均衡的问题，因此需要借助其它工具实现服务发现及负载均衡，比如 Consul。 Compose允许用户通过一个单独的docker-compose.yml模板文件（YAML 格式）...
docker-compose-ha-consul-vault-ui:HA Consul + Vault + Vault UI的docker-compose示例
05-09
consul-template会更新dnsmasq配置，并在配置更改后重新启动dnsmasq（例如，即时增加consul群集的大小）。 这使领事DNS查找HA。 保管箱通过通过Consul DNS公开的服务发现进行注册。 只要正常关闭集群，数据就会在...
Docker consul
TTSuzuka的博客
01-29 1035
Consul是一个支持多数据中心分布式高可用的服务发现和配置共享的服务软件,由HashiCorp公司用Go语言开发, 基于Mozilla Public License 2.0的协议进行开源。Consul支持健康检查，并允许HTTP、GRPC和DNS协议调用 API 存储键值对。
docker consul
m0_60360828的博客
02-12 4290
文章目录一、定义1、consul的优势2、Consul的特性3、构建核心二、部署1、consul服务器配置2、容器服务自动注册到consul集群3、consul-server节点配置nginx4、配置模板信息5、启动consul-template6、测试 一、定义 consul在docker中，一个能够自动发现并且更新监控信息的一个功能。 consul也可以说是一个注册中心，可以将监控的应用服务的基本信息，都注册到consul这里，然后consul将这些节点的信息进行制作一个可以被前端所能识别的更新的模板，
Docker——consul
Bilson99的博客
08-03 351
目 录一、服务注册与发现二、consul概述1、定义2、特性三、部署consul实验准备1、安装Consul2.查看集群信息3.通过httpd api获取集群信息四、安装registratorregistrator作用1.容器服务自动加入nginx集群2.测试发现功能是否正常3.验证http和nginx服务是否注册到consul五、安装docker templatedocker template概述1.安装软件包2.准备template nginx模板文件3.编译安装nginx4.启动template5.
Go语言：Docker安装及运行consul节点
qianfeng_dashuju的博客
10-26 210
微服务管理--Docker安装及运行consul节点 搭建集群 在真实的生产环境中，需要真实的部署consul集群。在一台机器上想要模拟多台集群部署的效果，有两种方案：一种是借助虚拟机，另一种是借助容器技术。 在本系列课程中，使用后者容器技术来实现集群的搭建。 Docker简介 Docker是一个开源的应用容器引擎，基于Go语言并遵从Apache2.0协议开源。 Docker可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中，然后发布到任何流行的Linux机器上，也可以实现虚拟化。
Docker Consul
weixin_50345054的博客
03-22 735
文章目录Docker Consul容器服务更新与发现容器服务更新与发现拓补图构建自动发现的Docker服务架构建立Consul服务Docker Consul部署环境配置Consul服务器容器服务自动加入consul集群在consul服务器上查看服务安装 consul-template准备 template nginx 模板文件编译安装nginx配置 nginx配置并启动 template增加一个nginx容器节点 Docker Consul容器服务更新与发现 容器服务更新与发现拓补图 拓补图解析 首先从
Docker consul （容器服务更新与发现）集群部署
穷则独善其身 达则兼善天下
08-04 307
Docker consul一.Consul概述（容器服务更新与发现）1. 什么是服务注册与发现2.什么是consul二.部署consul 一.Consul概述（容器服务更新与发现） 1. 什么是服务注册与发现 服务注册与发现是微服务架构中不可或缺的重要组件。起初服务都是单节点的，不保障高可用性，也不考虑服务的压力承载，服务之间调用单纯的通过接口访问。直到后来出现了多个节点的分布式架构，起初的解决手段是在服务前端负载均衡，这样前端必须要知道所有后端服务的网络位置，并配置在配置文件中。这里就会有几个问题: ●如
docker-consul啥意思
09-15
docker-consul是指在Docker容器中运行的Consul服务。Consul是一个用于服务发现、配置和分布式协调的工具，它提供了服务注册、健康检查、KV存储和DNS接口等功能。而docker-consul是将Consul作为一个Docker容器来运行...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值