Docker consul介绍及consul服务发现功能

Consul 是什么？

Consul有多个组件，但总体而言，它是基础架构中的一款服务发现和配置的工具。 它提供了几个关键功能：

• 服务发现：Consul client 可以提供服务，例如api或mysql，也可以使用Consul client来发现指定服务的提供者。 使用DNS或HTTP，应用程序可以轻松找到他们所依赖的服务。
• 健康检查：Consul client 可以提供任何数量的健康检查，或者与给定的服务（“Web服务器是否返回200 OK”），或与本地节点（“内存利用率是否低于90％”）相关联。 可以使用此信息来监控集群运行状况，服务发现组件使用此信息将流量从有问题的主机中移除出去。
• KV Store：应用程序可以使用Consul的分层键/值存储，包括动态配置，功能标记，协调，leader选举等等。 简单的HTTP API使其易于使用。
• 多数据中心：Consul支持多个数据中心。 这意味着Consul的用户不必担心构建额外的抽象层以扩展到多个区域。

Docker-Consul容器服务发现

Consul的特性

• 支持健康检查，允许存储键值对
• 基于Golong语言，可移植性强
• 支持ACL访问控制
• 与Docker等轻量级容器可无缝配合

创建consul群集

实现环境：
每台服务器都需要docker环境

consul服务器	主机名：docker	IP地址：20.0.0.10
节点服务器	主机名：docker-node	IP地址：20.0.0.20

consul服务器配置

1、创建consul目录

[root@docker ~]# mkdir consul
[root@docker ~]# cd consul/

2、上传consul_0.9.2_linux_amd64.zip数据包

[root@docker consul]# ll
总用量 9996
-rw-r--r-- 1 root root 10233177 11月 30 13:36 consul_0.9.2_linux_amd64.zip
[root@docker consul]#

3、解压数据包

[root@docker consul]# unzip consul_0.9.2_linux_amd64.zip

4、移动consul到/usr/bin/目录下

[root@docker consul]# mv consul /usr/bin/

5、创建群集

[root@docker consul]# consul agent \
-server \
-bootstrap \
-ui \
-data-dir=/var/lib/consul-data \
-bind=20.0.0.10 \
-client=0.0.0.0 \
-node=consul-server01 &> /var/log/consul.log &

6、查看群集信息

[root@docker consul]# docker images 
REPOSITORY          TAG                 IMAGE ID            CREATED             SIZE
[root@docker consul]# consul members
Node             Address         Status  Type    Build  Protocol  DC
consul-server01  20.0.0.10:8301  alive   server  0.9.2  2         dc1
[root@docker consul]# consul info |grep leader
	leader = true
	leader_addr = 20.0.0.10:8300

7、通过httpd api获取群集信息

查看群集server成员
[root@docker consul]# curl 127.0.0.1:8500/v1/status/peers
查看群集 Raf leader
[root@docker consul]# curl 127.0.0.1:8500/v1/status/leader
注册的所有信息
[root@docker consul]# curl 127.0.0.1:8500/v1/catalog/services
查看nginx服务信息
[root@docker consul]# curl 127.0.0.1:8500/v1/catalog/nginx

8、测试群集是否创建成功

节点服务器配置

1、下载registrator镜像加入consul群集

[root@docker-node ~]# docker run -d \
 --name=registrator \
 --net=host \
 -v /var/run/docker.sock:/tmp/docker.sock \
 --restart=always \
 gliderlabs/registrator:latest \
 -ip=20.0.0.20 \
 consul://20.0.0.10:8500

2、在节点上创建容器测试

[root@docker-node ~]# docker run -itd -p83:80 --name test-01 -h test01 nginx
[root@docker-node ~]# docker run -itd -p84:80 --name test-02 -h test02 nginx
[root@docker-node ~]# docker run -itd -p88:80 --name test-03 -h test03 httpd
[root@docker-node ~]# docker run -itd -p89:80 --name test-04 -h test04 httpd

3、去浏览器查看consul服务器是否发现节点创建的容器

compose_template+nginx反向代理

• 在已有的consul群集基础上使用compose_template创建nginx模板并实现反向代理
• Consul-Template是一个守护进程，用于实时查询Consul集群信息，并更新文件系统上任意数量的指定模板，生成配置文件。更新完成以后，可以选择运行shell命令执行更新操作，重新加载Nginx。Consul-Template可以香Consul中的服务目录、Key、 Key-values等。这种强大的抽象功能和查询语言模板可以使Consul-Template特别适合动态的创建配置文件。例如:创建Apache/Nginx Proxy Balancers、Haproxy Backends
  

consul服务器配置

1、下载consul-template工具

[root@docker consul]# ll
总用量 12628
-rw-r--r-- 1 root root  2694811 11月 30 13:36 consul-template_0.19.3_linux_amd64.zip

2、解压consul-template工具

[root@docker consul]# unzip consul-template_0.19.3_linux_amd64.zip

3、consul-template工具到/usr/bin/下面

[root@docker consul]# mv consul-template /usr/bin/

4、下载nginx数据包

[root@docker consul]# ll
-rw-r--r-- 1 root root   980831 12月  1 09:36 nginx-1.12.0.tar.gz

5、解压nginx数据包并安装

[root@docker nginx-1.12.0]# yum -y install gcc gcc-c++ make pcre-devel zlib-devel
[root@docker consul]# tar zxvf nginx-1.12.0.tar.gz  -C /opt/
[root@docker consul]# cd /opt/nginx-1.12.0/
[root@docker conf]# ./configure  --prefix=/usr/local/nginx
[root@docker nginx-1.12.0]# make && make install

6、修改nginx配置文件

[root@docker nginx-1.12.0]# vim /usr/local/nginx/conf/nginx.conf
http {
    include       mime.types;
    include       vhost/*.conf;		#增加
    default_type  application/octet-stream;

7、创建虚拟主机目录

[root@docker nginx-1.12.0]# mkdir /usr/local/nginx/conf/vhost

8、创建日志文件

[root@docker nginx-1.12.0]# mkdir /var/log/nginx

9、启动nginx

[root@docker nginx-1.12.0]# /usr/local/nginx/sbin/nginx 

10、创建nginx.ctmpl文件

[root@docker nginx-1.12.0]# cd /root/consul/
[root@docker consul]# vim nginx.ctmpl
upstream http_backend {
  {{range service "nginx"}}
  server {{.Address}}:{{.Port}};
  {{end}}
}
server {
  listen 1216;
  server_name localhost 20.0.0.10;
  access_log /var/log/nginx/tang.cn-access.log;
  index index.html index.php;
  location / {
    proxy_set_header HOST $host;
    proxy_set_header X-Real-IP $remote_addr;
    proxy_set_header Client-IP $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    proxy_pass http://http_backend;
  }
}

10、节点服务器清除多余容器只留如下便于测试

[root@docker ~]# docker ps -a
CONTAINER ID        IMAGE                           COMMAND                  CREATED             STATUS              PORTS               NAMES
98f6ae9d0955        gliderlabs/registrator:latest   "/bin/registrator -i…"   2 hours ago         Up 2 hours                              registrator

11、启用模板

[root@docker consul]# consul-template -consul-addr 20.0.0.10:8500 -template "/root/consul/nginx.ctmpl:/usr/local/nginx/conf/vhost/kgc.conf:/usr/local/nginx/sbin/nginx -s reload" --log-level=info

测试

节点服务器
1、创建nginx容器

[root@docker ~]#  docker run -itd -p83:80 --name test-01 -h test01 nginx
[root@docker ~]#  docker run -itd -p84:80 --name test-02 -h test02 nginx
[root@docker ~]# docker run -itd -p85:80 --name test-03 -h test03 nginx
[root@docker ~]# docker run -itd -p86:80 --name test-04 -h test04 nginx

consul服务器查看效果
查看kgc.conf配置文件是否产生IP地址

[root@docker vhost]# vim kgc.conf
upstream http_backend {

  server 20.0.0.20:83;

  server 20.0.0.20:84;

  server 20.0.0.20:85;

  server 20.0.0.20:86;

}

节点服务器
删除容器

[root@docker ~]# docker ps -a
CONTAINER ID        IMAGE                           COMMAND                  CREATED             STATUS              PORTS                NAMES
d626c152f015        nginx                           "/docker-entrypoint.…"   9 minutes ago       Up 8 minutes        0.0.0.0:86->80/tcp   test-04
80bdc961b58a        nginx                           "/docker-entrypoint.…"   9 minutes ago       Up 9 minutes        0.0.0.0:85->80/tcp   test-03
f9845230a18b        nginx                           "/docker-entrypoint.…"   13 minutes ago      Up 13 minutes       0.0.0.0:84->80/tcp   test-02
b1df1505e143        nginx                           "/docker-entrypoint.…"   13 minutes ago      Up 13 minutes       0.0.0.0:83->80/tcp   test-01
98f6ae9d0955        gliderlabs/registrator:latest   "/bin/registrator -i…"   2 hours ago         Up 2 hours                               registrator
[root@docker ~]# docker stop b1df1505e143
b1df1505e143
[root@docker ~]# docker stop f9845230a18b
f9845230a18b
[root@docker ~]# docker rm b1df1505e143
b1df1505e143
[root@docker ~]# docker rm f9845230a18b
f9845230a18b
[root@docker ~]#

consul服务器查看效果
查看kgc.conf配置文件是否产生IP地址

[root@docker vhost]# vim kgc.conf
upstream http_backend {

  server 20.0.0.20:85;

  server 20.0.0.20:86;

}