Docker compose容器编排

docker-compose

• Docker Compose的前身是Fig，它是一个定义及运行多个Docker容器的工具
• 使用Dcoker Compose不再需要使用Shell脚本来启动容器
• Docker Compose非常适合组合使用多个容器进行开发的场景
  

Consul

• Consul是HashiCorp公司推出的开源工具，用于实现分布式系统的服务发现与配置
• Consul的特性
  ·支持健康检查，允许存储键值对
  ·基于Golong语言，可移植性强
  ·支持ACL访问控制
• 与Docker等轻量级容器可无缝配合

Docker Compose容器编排

• YAML是一种标记语言很直观的数据序列化格式
• 文件格式及编写注意事项
  ·不支持制表符tab缩进，需使用空格缩进
  ·字符后缩进1个空格，如冒号、逗号、横杆
  ·用#号注释
  ·如果包含特殊字符用单引号引起来
  ·布尔值必须用引号括起来

compose自动编排思路：
1.创建dockerfile目录
2.在目录中写dockerfile文件
3.把dockerfile文件中add部分涉及到的文件添加到dockerfile目录中
4.编写yaml文件
5.如果涉及到数据卷，则需要在数据卷目录中放入指定文件
6.docker-compose编排构建
7.docker ps -a检查容器运行状态

compose部署
#环境部署所有主机安装docker环境（内容为docker基础）
yum -y install docker-ce 
#下载compose
curl -L https://github.com/docker/compose/releases/download/1.21.1/docker-compose-`uname -s`-`uname -m` -o /usr/local/bin/docker-compose

[root@localhost opt]# cp -p docker-compose /usr/local/bin/
[root@localhost opt]# chmod +x /usr/local/bin/docker-compose 

[root@localhost opt]# mkdir compose_nginx

[root@localhost compose_nginx]# tree ./
./
├── docker-compose.yml    #创建模板脚本
├── nginx
│   ├── dockerfile        #创建容器脚本
│   ├── nginx-1.12.2.tar.gz     #复制源码包
│   └── run.sh       #启动服务脚本
└── wwwroot
└── index.html     #站点


[root@localhost opt]# cd compose_nginx
[root@localhost opt]# vim docker-compose.yml
version: '3'
services:
  nginx:
    hostname: nginx
    build:
      context: ./nginx
      dockerfile: Dockerfile
    ports:
     - 1216:80
     - 1217:443
    networks:
     - cluster
    volumes:
     - ./wwwroot:/usr/local/nginx/html
networks:
  cluster:

[root@localhost compose_nginx]# docker-compose -f docker-compose.yml up -d



consul部署
服务器：20.0.0.31 Docker-ce、Compose 3、Consul、Consul、Consul-template
服务器：20.0.0.32 Docker-ce、registrator

consul服务器：
mkdir /root/consul

cp consul_0.9.2_linux_amd64.zip

mv consul /usr/bin

consul agent \
-server \
-bootstrap \
-ui \
-data-dir=/var/lib/consul-data \
-bind=20.0.0.31 \
-client=0.0.0.0 \
-node=consul-server01 &> /var/log/consul.log &

# 查看集群信息
[root@consul consul]# consul members

consul info | grep leader

#通过httpd api获取集群信息
curl 127.0.0.1:8500/v1/status/peer   #查看集群server成员
curl 127.0.0.1:8500/v1/status/leader #集群 Raf leader
curl 127.0.0.1:8500/v1/status/catalog/services #注册的所有服务
curl 127.0.0.1:8500/v1/status/catalog/nginx #查看nginx服务信息
[root@consul consul]# curl 127.0.0.1:8500/v1/catalog/nodes #集群节点详细信息

容器服务自动加入nginx集群：
1. 安装Gliderlabs/Registrator Gliderlabs/Registrator
可检查容器运行状态自动注册，还可注销docker容器的服务到服务配置中心。
目前支持Consul、Etcd和SkyDNS2。
在20.0.0.32节点，执行以下操作：
docker run -d \
--name=registrator \
--net=host \
-v /var/run/docker.sock:/tmp/docker.sock \
--restart=always \
gliderlabs/registrator:latest \
-ip=20.0.0.33 \
consul://20.0.0.31:8500

2.测试服务发现功能是否正常
docker run -itd -p:83:80 --name test-01 -h test01 nginx
docker run -itd -p:84:80 --name test-02 -h test01 nginx
docker run -itd -p:88:80 --name test-03 -h test01 httpd
docker run -itd -p:89:80 --name test-04 -h test01 httpd

3.验证http和nginx服务是否注册到consul
浏览器输入 http://20.0.0.31:8500，“单击NODES”，然后单击“consurl-server01”，会出现5个服务

#在consul服务器上查看服务
[root@consul consul]# curl 127.0.0.1:8500/v1/catalog/services
{"consul":[],"httpd":[],"nginx":[]}

4.安装consul-template
Consul-Template是一个守护进程，用于实时查询Consul集群信息，并更新文件系统上任意数量的指定模板，生成配置文件。
更新完成以后，可以选择运行shell命令执行更新操作，重新加载Nginx。Consul-Template可以查询Consul中的服务目录，
key、key-values等。
这种强大的抽象功能和查询语言模板可以使Consul-Template特别适合动态的创建配置文件。
例如：创建Apache/Nginx Proxy Balancers、Haproxy Backends

5.准备template nginx模板文件
#在consul上操作
vim /rrot/consul/nginx.ctmpl

upstream http_backend {
{{range service "nginx"}}
 server {{.Address}}:{{.Port}};
 {{end}}
}

server {
  listen 83;
  server_name localhost 20.0.0.31;
  access_log /var/log/nginx/abc.cn-access.log
  index index.html index.php;
  location / {
    proxy_set_header HOST $host;
    proxy_set_header X-Real-IP $remote_addr;
    proxy_set_header Client-IP $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    proxy_pass http://http_backend;
  }
}

6.编译安装nginx

yum install gcc pcre-devel zlib-devel -y

tar zxvf nginx-1.12.2.tar.gz -C /opt

./configure --prefix-/usr/local/nginx

make && make install

7.配置nginx

vim /usr/local/nginx/conf/nginx.conf

http {
    include    mime.types;
    include  vhost/*.conf;   #添加虚拟主机目录
    default_type  application/octet-stream;
}

#创建虚拟主机目录
mkdir /usr/local/nginx/conf/vhost

#创建日志文件目录
mkdir /var/log/nginx


8.配置并启动 template

上传 consul-template_0.19.3_linux_amd64.zip 包到/root目录下

cp consul-template_0.19.3_linux_amd64.zip /root/

unzip consul-template_0.19.3_linux_amd64.zip

mv consul-template /usr/bin

consul-template -consul-addr 20.0.0.31:8500 \
-template "/root/consul/nginx.ctmpl:/usr/local/nginx/conf/vhost/abc.conf:/usr/local/nginx/sbin/nginx -s reload" \
--log-level=info

#另外打开一个终端查看生成配置文件

[root@consul ~]# cat /usr/local/nginx/conf/vhost/abc.conf
upstream http_backend {

  proxy_set_header HOST $host;
  proxy_set_header X-Real-IP $remote_addr;
  proxy_set_header Client-IP $remote_addr;
  proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
  proxy_pass http://http_backend;

}
















增加一个nginx容器节点：
增加一个 nginx 容器节点，测试服务发现及配置更新功能
#在registrator服务端注册
docker run -itd -p:85:80 --name test-05 -h test05 nginx

#在consul服务器监控装填会有提示自动更新


#查看三台nginx容器日志，请求正常轮询到各个容器节点上
docker logs -f test-01
docker logs -f test-02
docker logs -f test-03


拓展：
consul多节点：
#添加一台已有docker环境的服务器20.0.0.33/24加入已有的群集中
consul agent \
-server \
-bootstrap \
-ui \
-data-dir=/var/lib/consul-data \
-bind=20.0.0.31 \
-client=0.0.0.0 \
-node=consul-server02 \
-enable-script-checks=true \
-datacenter=dc1 \
-join 20.0.0.32 &> /var/log/consul.log &

解释：
-enable-script-checks=true：设置检查服务为可用
-datacenter：数据中心名称
-join：加入到已有的集群中