docker consul

最新推荐文章于 2024-04-30 18:22:25 发布
最新推荐文章于 2024-04-30 18:22:25 发布
阅读量4.2k 收藏 4
点赞数 2
文章标签： docker consul 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_60360828/article/details/122900394
版权

文章目录

一、定义

consul在docker中，一个能够自动发现并且更新监控信息的一个功能。

consul也可以说是一个注册中心，可以将监控的应用服务的基本信息，都注册到consul这里，然后consul将这些节点的信息进行制作一个可以被前端所能识别的更新的模板，然后将这个模板同步到主页的更新列表中，一旦后面的应用服务节点增加信息的服务，则会及时的将信息更新到consul中，consul再去通知主页进行更新。

1、consul的优势

  1. consul是使用Raft算法来保证一致性，比发咋的Paxos算法更加的直接，相比较而言，zookeeper采用的是Paxos，而Etcd采用的是Raft。

  2. 支持多数据中心，内外网的服务采用不同的端口进行监听。多数据中心集群可以避免单数据中心的单点故障，而其部署则需要考虑网络延迟，分片等情况。zookeeper和Etcd均不支持多数据中心功能的支持

  3. 可以支持健康检查，Etcd不支持该功能

  4. 支持HTTP、DNS、和GPRS协议接口。zookeeper的集成较为复杂，Etcd支持吃HTTP协议

  5. 官方提供WEB的管理界面，而Etcd无此功能

  6. 综合比较，Consul作为服务注册和配置管理的新星，比较值得关注和研究

Etcd：只一个分布式的数据库，比MySQL等这些数据库相比，有一个有点：能够发现数据的更新的信息

​ K8s的核心数据库就是Etcd，因为Etcd能够自动发现。因为容器的特性是短周期。意味着容器挂掉之后，重启，IP地址就会发生变化，常规数据库不能自动更新这些地址，所以容器IP地址发生改变之后并不能自动获取信息，并将信息更新到新的容器上。

2、Consul的特性

Consul的特性是，分布式的、高可用的、横向扩展的，其特性为下面四种：

服务发现：可方便的实现服务注册，通过DNS或者HTTP应用程序可以很容易的找到他所依赖的服务

key/value（键值对）存储：使用key/value的形式进行数据存储

多数据中心：Consul支持开箱即用的多数据中心。这意味着用户不需要担心建立额外的抽象层，让业务扩展到多个区域。

健康检查：可以对指定服务进行健康检查。例如：Response Status是否为200，避免将流量转发到不健康的服务上

3、构建核心

template 模板：负责更新配置模块
registrator (自动发现+注册到consul-server端)后端每构建出一个容器，会向registrator进行注册，控制consul完成更新操作，consul会触发consul template模板进行热更新( reload)
核心机制: consul ，自动发现、自动更新，为容器提供服务（添加、删除、生命周期)

下面我画了一个简易的consul监控的步骤，举例就用nginx了。
在这里插入图片描述

其表示的是，nginx代理的有一些容器。假如这个nginx代理的一个容器因为一些原因二挂掉，需要重新添加新的容器。

正常情况下，不手动更新的话，nginx是不能自动识别到新添加的容器的，需要添加新的容器之后，再手动更新到nginx.conf中

consul则是可以取代这个步骤，consul能够借助registration来进行监控识别registration所监控的模块，当这个模块中有添加或者减少等变更容器的操作信息产生的时候，registration会直接注册，并且汇报给consul agent。

consul agent会将其传输给consul server。由consul保存到consul template。consul template是负责更新配置文件，将配置文件更新之后，将更新好的配置文件传输给监控中的nginx中的nginx.conf中。

nginx通过include加载和识别，consul控制nginx重载即可。

上面这是大致的保存过程。

二、部署

服务器Consul：

​ IP：192.168.75.51

​ 插件：Docker-ce、Consul、Consul-template

服务器docker：

​ IP：192.168.75.53

​ 插件：Docker-ce、registration

1、consul服务器配置

tree
.
└── consul_0.9.2_linux_amd64.zip

找到安装包，并且将其解压，直接放在当前目录，或者指定目录都可以，我为了方便后面的时候使用consul，直接解压在缓存文件目录中了

unzip consul_0.9.2_linux_amd64.zip -d /usr/bin/

解压完成之后，开启consul进行监控节点

[root@localhost bin]# consul agent \		#使用的是agent模式
> -server \			#使用的是server模式
> -bootstrap \		#前端框架
> -ui \				#可被访问的界面
> -data-dir=/uar/lib/consul-data \		#数据目录
> -bind=192.168.75.51 \		#consul服务器地址
> -client=0.0.0.0 \			#监听地址，监听所有含有registration服务的服务器地址
> -node=consul-server01 &> /var/log/consul.log &		#节点名称写入日志，并且后台运行
[1] 2423		

jobs

[1]+  运行中               consul agent -server -bootstrap -ui -data-dir=/uar/lib/consul-data -bind=192.168.75.51 -client=0.0.0.0 -node=consul-server01 &>/var/log/consul.log &

consul members		#查看集群信息
Node             Address             Status  Type    Build  Protocol  DC
consul-server01  192.168.75.51:8301  alive   server  0.9.2  2         dc1

再查看consul的leader信息，找到端口号之后再确认被监听端口端口信息，以及被监听端口开启状态

consul info | grep leader
        leader = true
        leader_addr = 192.168.75.51:8300

netstat -natp | grep 8300
tcp        0      0 192.168.75.51:8300      0.0.0.0:*               LISTEN      2423/consul
tcp        0      0 192.168.75.51:8300      192.168.75.51:41005     ESTABLISHED 2423/consul
tcp        0      0 192.168.75.51:41005     192.168.75.51:8300      ESTABLISHED 2423/consul
#可以看到，正在使用这个端口信息的就是consul，

确认之后，可以到浏览器上进到consul的界面进行管理

http://consul的IP地址:8500

#8500默认是登录consul的端口号
#lsof -i:8500
COMMAND  PID USER   FD   TYPE DEVICE SIZE/OFF NODE NAME
consul  2423 root   18u  IPv6  31107      0t0  TCP *:fmtp (LISTEN)

在这里插入图片描述

在这里插入图片描述

刚刚创建，并且没有加入一个监测点，暂时还没有什么记录产生

直接在服务节点上也可以直接以命令的方式，查看一部分节点信息：

curl 127.0.0.1:8500/v1/status/peers		#查看集群server成员
["192.168.75.51:8300"]
curl 127.0.0.1:8500/v1/status/leader	#集群Raf leader
"192.168.75.51:8300"
curl 127.0.0.1:8500/v1/catalog/services	#注册的所有服务
{"consul":[]}		#当前还没有注册过服务
curl 127.0.0.1:8500/v1/catalog/服务名字，例如nginx		#可以查看被监控服务的服务信息，因为还没有被监控节点，所以为空
curl 127.0.0.1:8500/v1/catalog/nodes	#查看弄得节点详细信息
[{"ID":"f41cbead-9a4a-451f-416c-a2d043b3e48d","Node":"consul-server01","Address":"192.168.75.51","Datacenter":"dc1","TaggedAddresses":{"lan":"192.168.75.51","wan":"192.168.75.51"},"Meta":{},"CreateIndex":5,"ModifyIndex":6}]

上面consul正常安装完成了，下面开启服务发现等功能

2、容器服务自动注册到consul集群

1、在docker服务器上安装Gliderlabs/Registration Gliderlabs/Registrator

可以检查容器运行状态自动注册，还可以注册docker容器的服务到服务配置中心（8300收集到8500展示）

docker run -d \
> --name registrator \		#容器名字
> --net host \				#网络使用host
> -v /var/run/docker.sock:/tmp/docker.sock \	#挂载
> --restart always \	#重启策略，总是重启，不管是故障还是人为，只要非开启状态就重启
> gliderlabs/registrator:latest \	#使用的镜像名字以及标签
> -ip 192.168.75.100 \		#容器ID地址
> consul://192.168.75.51:8500	#配置中心的位置


docker ps

CONTAINER ID   IMAGE                           COMMAND                  CREATED         STATUS         PORTS     NAMES
7347196d08ec   gliderlabs/registrator:latest   "/bin/registrator -i…"   9 seconds ago   Up 8 seconds             registrator

测试是否能自动发现添加的容器

docker run -itd -p:81:80 --name test1 -h test01 nginx
docker run -itd -p:82:80 --name test2 -h test02 nginx
docker run -itd -p 83:80 --name test3 -h test03 httpd
docker run -itd -p 84:80 --name test4 -h test04 httpd

docker ps

CONTAINER ID   IMAGE                           COMMAND                  CREATED          STATUS          PORTS                               NAMES
03ee344d6e8a   httpd                           "httpd-foreground"       6 seconds ago    Up 4 seconds    0.0.0.0:84->80/tcp, :::84->80/tcp   test4
17989e06cb49   httpd                           "httpd-foreground"       20 seconds ago   Up 18 seconds   0.0.0.0:83->80/tcp, :::83->80/tcp   test3
d6bf0005992b   nginx                           "/docker-entrypoint.…"   4 minutes ago    Up 4 minutes    0.0.0.0:82->80/tcp, :::82->80/tcp   test2
0e56568bed57   nginx                           "/docker-entrypoint.…"   5 minutes ago    Up 4 minutes    0.0.0.0:81->80/tcp, :::81->80/tcp   test1

添加完成之后，继续到consul的主界面查看

在这里插入图片描述
在这里插入图片描述

3、consul-server节点配置nginx

yum -y install pcre-devel zlib-devel gcc gcc-c++ make

tar zxvf nginx-1.12.0.tar.gz
cd nginx-1.12.0/

./configure \
--prefix=/usr/local/nginx \
--user=nginx \
--group=nginx \
--with-http_stub_status_module

make && make install

安装完成之后，找到配置文件，找到http模块

cd /usr/local/nginx/conf/ && vim nginx.conf

17 http {
18     include       mime.types;
19     default_type  application/octet-stream;
#找到之后，在include下面再插入一行，使其加载虚拟主机里的所有conf文件

17 http {
18     include       mime.types;
19     include       vhost/*.conf;		#加载虚拟机里面所有以conf结尾的文件
20     default_type  application/octet-stream;

#再创建一个vhost目录，供其识别
[root@localhost conf]# mkdir vhost

#查看
pwd && ls | grep vhost
/usr/local/nginx/conf
vhost

启动nginx

[root@localhost conf]# ../sbin/nginx		#或者先存放在缓存命令目录中，再执行也可以
#挂载：ln -s /usr/local/nginx/sbin/nginx /usr/local/bin/

[root@localhost conf]# ss -natp  | grep nginx
LISTEN     0      128          *:80                       *:*                   users:(("nginx",pid=6728,fd=6),("nginx",pid=6727,fd=6))

4、配置模板信息

vim /opt/consul/nginx.ctmpl		#写入下面信息

upstream http_backend {			#协议的后端
  {{range service "nginx"}}                           服务的范围只收集nginx信息
   server {{.Address}}:{{.Port}};		#此处引用的变量会指向后端的地址和端口（动态变化）
   {{end}}
}
#收集信息，并将收集到的信息展现为IP和端口信息

server {
  listen 84;
  server_name localhost 192.168.75.51;		#反向代理的服务器地址，前端服务器地址
  access_log /var/log/nginx/lhk.com-access.log;
  index index.html index.php;
  location / {
    proxy_set_header HOST $host;
    proxy_set_header X-Real-IP $remote_addr;		#后端真实IP
    proxy_set_header Client-IP $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;		#转发地址
    proxy_pass http://http_backend;
  }
}

5、启动consul-template

consul-template是一个守护进程，用于实时查询consul集群信息，并且更新文件系统上任意数量的指定模板，生成配置文件。更新完成后，可以选择运行shell命令进行执行更新操作，冲新加载nginx。consul-template可以查询consul中的服务目录、key、key-values等。

这种强大的抽象功能和查询语言模板可以使consul-template特别适合动态的创建配置文件

因为其解压后也直接是一个执行程序，所以直接解压在缓存命令文件中

unzip consul-template_0.19.3_linux_amd64.zip -d /usr/bin/

consul-template \
> -consul-addr 192.168.75.51:8500 \
> -template "/opt/consul/nginx.ctmpl:/usr/local/nginx/conf/vhost/lhk.conf:/usr/local/nginx/sbin/nginx -s reload" \
> --log-level=info

完成之后，可以到配置文件中看所有nginx相关的IP和端口信息

cat /usr/local/nginx/conf/vhost/lhk.conf

upstream http_backend {

   server 192.168.75.100:81;

   server 192.168.75.100:82;

}

server {
  listen 84;
  server_name localhost 192.168.75.51;
  access_log /var/log/nginx/lhk.com-access.log;
  index index.html index.php;
  location / {
    proxy_set_header HOST $host;
    proxy_set_header X-Real-IP $remote_addr;
    proxy_set_header Client-IP $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    proxy_pass http://http_backend;
  }
}

现在consul检测到的nginx的容器，现在已经被自动更新到这个配文件中了，显示格式就是之前设置好的IP地址加上端口

6、测试

在docker服务器上再继续创建一个nginx容器，创建步骤就省略了跟上面一样。只需要再创建一个nginx容器就行。

直接查看结果

先到管理页面处查看：

在这里插入图片描述

可以看到现在已经显示的多了一个

再到consul服务节点去查看：

cat /usr/local/nginx/conf/vhost/lhk.conf

upstream http_backend {

   server 192.168.75.100:81;

   server 192.168.75.100:82;

   server 192.168.75.100:85;

}

consul服务节点这边的这个配置文件中，也实时被同步到了nginx容器的现在的状况

添加尝试了，再试试删除容器

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-GPDrqvkr-1644662454755)(D:\图片\image-20220212183602434.png)]

模拟test2坏掉了

docker rm -f test2

在这里插入图片描述

到控制页面再看，现在82端口已经消失了

[root@localhost consul]# cat /usr/local/nginx/conf/vhost/lhk.conf
upstream http_backend {

   server 192.168.75.100:81;

   server 192.168.75.100:85;

}
#被更新的配置文件也是一样的消失了82端口这个容器
叁煌蛋
关注
  • 2
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
docker-consul:Consul 的官方 Docker 镜像
08-04
这是的 Docker的 Git 存储库。 有关如何使用此 Docker 映像的完整自述文件以及有关贡献和问题的信息，请参阅。 完整的自述在，特别是在。 看到此处合并的更改尚未显示在 Docker Hub 上吗？ 检查，尤其是 。 有关...
Docker--consul
Liqi23的博客
02-12 1520
服务注册与发现是微服务架构中不可或缺的重要功能。起初服务都是单节点的，不保障高可用性，也不考虑服务的压力承载，服务之间调用单纯的通过接口访问。直到后来出现了多个节点的分布式架构，起初的解决手段是在服务前端负载均衡，这样前端必须要知道所有后端服务的网络位置，并配置在配置文件中consul 是 google 开源的一个使用 go 语言开发的服务管理软件。支持多数据中心、分布式高可用的、服务发现和配置共享。采用 Raft 算法，用来保证服务的高可用。
Docker之Consul部署
weixin_71429850的博客
10-24 2787
Consul是一套开源的分布式服务发现和配置管理系统，由HasiCorp公司用go语言开发的。提供了微服务系统中服务助力、配置中心、控制总线等功能，这些功能中的每一个都可以根据需要单独使用，也可以一起使用以构造全方位的服务网络，总之，Consul提供了完整的服务网格解决方案。
Docker容器---docker-Consul部署
最新发布
AH99999的博客
04-30 1008
所有以.sock结尾的文件都是应用的数据连接文件1、启动consul后默认会监听的5个端口8300：集群内部数据的读写和复制8301：单个数据中心gossip协议通讯8302：夸数据中心gossip协议通讯8500：提供获取服务列表，注册服务，注销服务等HTTP接口：提供UI服务8600：采用DNS协议提供服务发现功能2、Consul用来解决什么问题如果后端有大规模的服务节点集群是配置麻烦的问题每次后端服务网络位置变化都需要人工修改前端调度器配置的问题。
docker-consul
tefuiryy的博客
03-31 4029
docker consul一、Consul概述1、consul简介2、consul特点3、docker consul容器服务更新与发现二、部署1、server部署（192.168.177.33）2、client部署（192.168.177.8）3、配置template模块自动更新4、测试访问代理服务器 一、Consul概述 1、consul简介 consul是一个服务发现和注册的工具，具有分布式、搞扩展性能特点。 2、consul特点 （1）支持健康检查，允许储存值对 （2）基于Golong语言，可移植性
Docker consul
TTSuzuka的博客
01-29 992
Consul是一个支持多数据中心分布式高可用的服务发现和配置共享的服务软件,由HashiCorp公司用Go语言开发, 基于Mozilla Public License 2.0的协议进行开源。Consul支持健康检查，并允许HTTP、GRPC和DNS协议调用 API 存储键值对。
docker-nginx-consul-template:Docker映像已安装nginx和consul模板
05-15
Docker映像已安装nginx和consul模板 支持的标签和相应的Dockerfile链接 有关此图像及其历史记录的更多信息，请参阅的相关清单文件。 什么是docker-nginx-consul-template？ 带有nginx和consul模板的Docker映像，...
docker-consul-template:Docker领事模板
04-30
Docker领事模板可用模板nginx.ctmpl可用版本0.11（docker标签： 0.11 ...标签0.11 docker run -d --name consul-template \ --net=host --restart=always \ --volumes-from=nginx \ -v /var/run/docker.sock:/var
consul镜像+docker-compose.yaml
02-07
consul镜像+docker-compose.yaml
consuldock:基于docker容器的动态Consul Nodeservice创建
06-07
基于docker容器的动态Consul节点/服务创建 使用以下库： 要求 v1.0.0 可能更早些还可以 v0.3.0 安装 只需go get github.com/brimstone/consuldock或go get github.com/brimstone/consuldock docker run -d -v /...
docker——consul概述以及集群环境搭建
oyyy3的博客
02-04 3969
目录 1.容器服务更新与发现 2.consul部署 1.在主节点上部署consul 2.从节点上 容器服务自动注册到consul集群 1.安装Gliderlabs/Registrator（插件） Gliderlabs/Registrator 2.测试服务发现功能是否正常 3.验证nginx和http服务是否注册到consul 4.安装consul-template 5.准备template nginx模板文件（在consul服务器上） 6.编译安装nginx(在consul服务器上)
【Docker从入门到入土 6】Consul详解+Docker https安全认证（附证书申请方式）
这是博客的简介的简介
10-25 2444
Docker+consul实现容器服务的更新和发现；Dokcer安全；自签名证书
【微服务| Consul】使用docker搭建consul集群
土豆
07-15 2338
搭建一个三节点的consul集群，一般得有同网段的3个不同的ip地址作为consul集群的内部通信地址，这对于处于尝鲜阶段的同学不太友好（我没有这么多PC、服务器，也没这么多资源搞VM），所以这里通过docker的方式生成3个consul节点搭建consul集群。先附上consul集群的架构图简单罗列consul的几个概念，有助于后面搭建consul集群的理解consul的集群是由N个server节点，加上M个client节点组成，所有的服务都可以注册到这些节点上。leader，节点个数一般3-5台。...
Docker Consul详解与部署示例
qq_51545656的博客
01-16 1391
之前的架构 优化后 Consul构成 Consul由多个关键组件组成，这些组件共同协作以实现分布式系统中的服务发现、健康检查、配置管理等功能。以下是Consul的主要组成部分： Agent（代理）： Agent是Consul集群中每个节点上运行的守护进程。它有两种模式： Server（服务器）： 负责维护集群状态、参与领导者选举、响应RPC查询等。一个数据中心通常有多个Server，通过Raft协议保持一致性。 Client（客户端）： 转发所
Docker-Consul概述
WuDan_1112的博客
07-20 802
什么是ConsulConsul是HashiCorp公司推出的开源工具，Consul由Go语言开发，部署起来非常容易，只需要极少的可执行程序和配置文件，具有绿色、轻量级的特点。Consul是分布式的、高可用的、可横向扩展的用于实现分布式系统的服务发现与配置。支持多数据中心、分布式高可用的、服务发现和配置共享。采用Raft算法，用来保证服务的高可用。内置了服务注册与发现框架、分布一致性协议实现、健康检查、Key/Value存储、多数据中心方案，不再需要依赖其他工具（比如ZooKeeper等)。关键特性。...
docker安装consul
qq_45887180的博客
04-10 661
docker安装consuldocker安装consul1. 安装docker2. 拉取consul镜像3. 启动consul容器4. 测试 docker安装consul 1. 安装docker 2. 拉取consul镜像 docker pull consul 3. 启动consul容器 docker run --name consul1 -d -p 8500:8500 consul agent -server -bootstrap-expect=1 -ui -bind=0.0.0.0 -client
Docker-Consul概述以及集群环境搭建
FYR1018的博客
07-11 616
1 什么是服务注册与发现2 什么是 consul2.1 consul 提供的关键特性3 consul 部署3.1 环境配置3.1.1 建立 Consul 服务3.1.2 查看集群信息3.1.3 通过 http api 获取集群信息3.2 registrator 服务器3.2.1 安装 Gliderlabs/Registrator3.2.2 测试服务发现功能是否正常3.2.3 验证 http 和 nginx 服务是否注册到3.3 consul-template3.3.1 准备 tem...
Docker Consul
08-18
Docker Consul是一个用于服务发现、配置和分布式协调的开源工具。它可以帮助您在Docker环境中管理和监控多个容器的状态和连接。 使用Docker Consul，您可以注册和发现容器中的服务，并利用其提供的API进行服务发现、健康检查和负载均衡。它还提供了键值存储和事件系统，用于共享和同步配置信息。 下面是一些使用Docker Consul的常见场景： 1. 服务发现：您可以在Docker容器中运行Consul代理，并将每个容器注册为Consul服务。这样，其他容器或应用程序可以通过Consul发现和访问这些服务。 2. 健康检查：Consul可以定期检查容器中的服务是否正常运行，并根据检查结果自动更新服务的状态。这样，其他容器或应用程序可以根据服务的健康状态进行决策。 3. 配置管理：Consul提供了一个键值存储系统，用于存储和管理配置信息。您可以将配置信息存储在Consul中，并使用其API在容器中访问这些配置。 4. 事件订阅：Consul的事件系统允许您订阅特定类型的事件，例如服务注册或注销、健康检查状态变化等。这样，您可以根据事件触发自定义逻辑。 要使用Docker Consul，您可以在Docker环境中部署Consul容器，并使用其提供的API和命令行工具进行配置和管理。您可以通过Docker Compose或Docker Swarm等工具来编排和管理Consul集群。 请注意，这里提到的Docker Consul是指使用Docker容器部署和管理的Consul实例，并不是指Consul本身由Docker开发。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值