Docker Compose容器编排、consul群集

最新推荐文章于 2024-07-03 18:35:40 发布
最新推荐文章于 2024-07-03 18:35:40 发布
阅读量183 收藏
点赞数
分类专栏： 云计算 文章标签： docker
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/God_ZY/article/details/110387506
版权

Docker Compose one

  • Docker Compose的前身是Fig他是一个定义及运行多个Docker容器的工具
  • 使用Docker　compose不再需要使用shell脚本来启动容器
  • D1ocker　Compose非常适合组合使用多个容器进行开发的场景
    image-20201130140844715

Consul是Hashicorp公司推出的开源工具，用于实现分布式系统的服务发现于配置

Consul的特性

  • 支持健康检查，允许储存键值对
  • 基于Golong语言，可移植性强
  • 支持ACL访问控制

与Docker等轻量级容器可无缝配合

image-20201130140205828

Docker单机网络拓补图

image-20201130140911882

端口映射

  • 端口映射机制将容器内的入伍提供给外部网络访问
  • 可随机或指定映射端口范围
docker run -d -P httpd:centos
docker run -d -p 49888:80 httpd:centos

容器互联

  • 在源容器和接受容器间建立一条网络通信隧道
  • 使用docker run命令–link选项实验容器间互联通信

实现容器互联

docker run -d -P --name web1 httpd：centos
docker run -d -P --name web2--link web1:web1 httpd:centos
docker exec -it web2 /bin/bash
ping web1

Docker Compose 容器编排

YAML是一种标记语言很直观的数据序列化格式

文件格式及编写注意事项

  • 不支持制表符TAB键缩进，需要使用空格缩进
  • 通常开头缩进两个空格
  • 字符后缩进一个空格，如冒号、逗号、横杆
  • 用#号注释
  • 如果包含特殊字符用单引号引起来
  • 布尔值必须用引号括起来

Docker Compose配置常用字段

字段描述
build dockerfile context指定Dockerfile文件名构建镜像上下文路径
image指定镜像
command执行命令，覆盖默认命令
container name指定容器名称，由于容器名称是唯一的，如果指定自定义名称，则无法scale
deploy指定部署和运行服务相关配置，只能在Swarm模式使用
environment添加环境变量
networks加入网络
ports暴露容器端口，与-p相同，但端口不能低于60
volumes挂载宿主机路径或命令卷
restart重启策略，默认no,always,no-failure,unless-stoped
hostname容器主机名

Docker Compose常用命令

字段描述
build重新构建服务
ps列出容器
up创建和启动容器
exec在容器里面执行命令
scale指定一个服务容器启动数量
top显示容器进程
logs查看容器输出
down删除容器、网络、数据卷和镜像
stop/start/restart停止/启动/重启服务

Compose命令说明

基本的使用格式

docker-compose [potions] [COMMAND][ARGS]

docker-compose选项

  • –verbose输出更多调试信息
  • –version 打印版本并退出
  • -f, --file FILE使用特定的compose模板文件，默认为docker-compose.yml
  • -p, --project-name NAME指定项目名称，默认使用目录名称

利用Docker Compose容器编排

[root@server1 ~]# mkdir compose_nginx
[root@server1 ~]# cd compose_nginx
[root@server1 compose_nginx]# vim docker-conpose.yml          ###创建compose编排工具
version: '3'                                                  ###版本三
services:                                                     ###服务名称
  nginx:
    hostname: nginx                                           ###容器名
    build:                                                    ###创建容器
      context: ./nginx                                        ###素材目录
      dockerfile: Dockerfile                                  ###素材
    ports:                                                    ###提供端口
      - 1216:80                                               ###映射端口号
      - 1217:443                                              ###映射端口号
    networks:                                                 ###建立群集
      - cluster                                               ###群集名称
    volumes:                                                  ###建立数据卷
      - ./wwwroot:/usr/local/nginx/html                       ###绑定容器站点位置
networks:                                                     ###声明群集名称
  cluster:
  
[root@server1 compose_nginx]# mkdir nginx

[root@server1 nginx]# vim Dockerfile                          
FROM centos:7
MAINTAINER this is nginx project
RUN yum -y update
RUN yum -y install pcre-devel zlib-devel gcc gcc-c++ make
RUN useradd -M -s /sbin/nologin nginx
ADD nginx-1.12.2.tar.gz /usr/local/src
WORKDIR /usr/local/src
WORKDIR nginx-1.12.2
RUN ./configure \
--prefix=/usr/local/nginx \
--user=nginx \
--group=nginx \
--with-http_stub_status_module && make && make install
ENV PATH /usr/local/nginx/sbin:$PATH
EXPOSE 80
EXPOSE 443
RUN echo "daemon off;" >> /usr/local/nginx/conf/nginx.conf
ADD run.sh /run.sh
RUN chmod 755 /run.sh
CMD ["/run.sh"]

[root@server1 nginx]# vim run.sh 
#!/bin/bash
/usr/local/nginx/sbin/nginx

将nginx-1.12.2.tar.gz放到与Dokcerfile文件相同路径下

[root@server1 nginx]# docker-compose -f docker-compose.yml  up -d

[root@server1 compose_nginx]# tree ./
./
├── docker-compose.yml
├── nginx
│?? ├── Dockerfile
│?? ├── nginx-1.12.2.tar.gz
│?? └── run.sh
└── wwwroot
    └── index.html

2 directories, 5 files

image-20201130103936175

Docker consul群集

搭建consul群集

环境

IP地址相关环境
20.0.0.10Docker-ce、Compose3、Consul、Consul-template
20.0.0.20Docker-ce
[root@server ~]# mkdir consul && cd consul

[root@server consul]# rz -E
rz waiting to receive.

[root@server consul]# unzip consul_0.9.2_linux_amd64.zip 
Archive:  consul_0.9.2_linux_amd64.zip
  inflating: consul 
  
[root@server consul]# ll
总用量 51772
-rwxr-xr-x. 1 root root 42777946 8月  10 2017 consul
-rw-r--r--. 1 root root 10233177 11月 30 12:07 consul_0.9.2_linux_amd64.zip

[root@server consul]# mv consul /usr/bin

开启服务并查看群集信息

[root@server consul]# consul agent -server -bootstrap -ui -data-dir=/var/lib/consul-data -bind=20.0.0.10 -client=0.0.0.0 -node=consul-server01 &> /var/log/consul.log &
[1] 10735
[root@server consul]# consul members
Node             Address         Status  Type    Build  Protocol  DC
consul-server01  20.0.0.10:8301  alive   server  0.9.2  2         dc1

[root@localhost consul]# curl 127.0.0.1:8500/v1/status/peers       ##查看群集server成员
[root@localhost consul]# curl 127.0.0.1:8500/v1/status/leaders     ##群集中 Raf leader
[root@localhost consul]# curl 127.0.0.1:8500/v1/catalog/services   ##注册的所有服务
[root@localhost consul]# curl 127.0.0.1:8500/v1/catalog/nodes      ##群集节点详细信息
[root@localhost consul]# curl 127.0.0.1:8500/v1/catalog/nginx      ##查看 nginx 服务信息

浏览器输入ip查看群集

image-20201201105736798

创建容器并查看

[root@client ~]# docker run -itd -p:83:80 --name test-01 0h test01 nginx
[root@client ~]# docker run -itd -p:84:80 --name test-02 -h test02 httpd
docker run -itd -p:85:80 --name test-03 -h test03 tomcat

image-20201201155633331
image-20201201155647009

删除容器并查看

[root@client ~]# docker stop 40f9d4dae6ff
40f9d4dae6ff
[root@client ~]# docker rm 40f9d4dae6ff
40f9d4dae6ff

image-20201201163721297

安装consul-template

consul-template

  1. 是基于 Consul 的自动替换配置文件的应用；
  2. 可以查询 Consul 中的服务目录：Key、Key-values等；
  3. 特别适合动态的创建配置文件；
  4. 是一个守护进程，用于实时查询 consul 集群信息；

创建模板、编译安装nginx并启动

[root@server consul]# vim nginx.ctmpl
upstream http_backend {
    {{range service "nginx"}}
     server {{.Address}}:{{.Port}};
    {{end}}
}

server {
       listen 83;
       server_name localhost 20.0.0.10;
       access_log /var/log/nginx/go.cn-access.log;
       index index.html index.php;
       location / {
          proxy_set_header HOST $host;
          proxy_set_header X-Real-IP $remote_addr;
          proxy_set_header Client-IP $remote_addr;
          proxy_set_header X-Fprwarded-For $proxy_add_x_forwarded_for;
          proxy_pass http://http_backend;
                 }
       }
       
[root@server consul]# yum install gcc gcc-c++ pcre pcre-devel zlib-devel -y
[root@server consul]# tar zxf nginx-1.12.0.tar.gz -C /opt/
[root@server consul]# cd /opt/nginx-1.12.0/
[root@server nginx-1.12.0]# ./configure --prefix=/usr/local/nginx
[root@server nginx-1.12.0]# make && make install

[root@server nginx-1.12.0]# vim /usr/local/nginx/conf/nginx.conf
17-20行修改为
 17 http {
 18     include       mime.types;
 19     include       vhost/*.conf;
 20     default_type  application/octet-stream;

创建虚拟主机目录和日志文件目录，启动nginx
[root@server nginx-1.12.0]# mkdir /usr/local/nginx/conf/vhost
[root@server nginx-1.12.0]# mkdir /var/log/nginx
[root@server nginx-1.12.0]# /usr/local/nginx/sbin/nginx

配置并启动 template

[root@server nginx-1.12.0]# cd /usr/bin
[root@server bin]# rz -E
rz waiting to receive.
[root@server bin]# unzip consul-template_0.19.3_linux_amd64.zip 
Archive:  consul-template_0.19.3_linux_amd64.zip
  inflating: consul-template         

[root@server bin]# consul-template -consul-addr 20.0.0.10:8500 -template "/root/consul/nginx.ctmpl:/usr/local/nginx/conf/vhost/go.conf:/usr/local/nginx/sbin/nginx -s reload" --log-level=info
2020/12/01 08:15:09.873893 [INFO] consul-template v0.19.3 (ebf2d3d)
2020/12/01 08:15:09.873935 [INFO] (runner) creating new runner (dry: false, once: false)
2020/12/01 08:15:09.874305 [INFO] (runner) creating watcher
2020/12/01 08:15:09.874546 [INFO] (runner) starting
2020/12/01 08:15:09.874561 [INFO] (runner) initiating run
2020/12/01 08:15:09.889877 [INFO] (runner) initiating run
2020/12/01 08:15:09.890710 [INFO] (runner) rendered "/root/consul/nginx.ctmpl" => "/usr/local/nginx/conf/vhost/go.conf"
2020/12/01 08:15:09.890729 [INFO] (runner) executing command "/usr/local/nginx/sbin/nginx -s reload" from "/root/consul/nginx.ctmpl" => "/usr/local/nginx/conf/vhost/go.conf"
2020/12/01 08:15:09.890771 [INFO] (child) spawning: /usr/local/nginx/sbin/nginx -s reload

[root@server ~]# cat /usr/local/nginx/conf/vhost/go.conf 
upstream http_backend {
    
     server 20.0.0.20:83;
    
}

server {
       listen 83;
       server_name localhost 20.0.0.10;
       access_log /var/log/nginx/go.cn-access.log;
       index index.html index.php;
       location / {
          proxy_set_header HOST $host;
          proxy_set_header X-Real-IP $remote_addr;
          proxy_set_header Client-IP $remote_addr; 
          proxy_set_header X-Fprwarded-For $proxy_add_x_forwarded_for;
          proxy_pass http://http_backend;
                 }
       }
[root@server ~]# cd /var/log/nginx/
[root@server nginx]# ll
总用量 0
-rw-r--r--. 1 root root 0 12月  1 16:15 go.cn-access.log

创建一个nginx容器节点测试

[root@client ~]# docker run -itd -p:91:80 --name test-10 -h test10 nginx

[root@server bin]# consul-template -consul-addr 20.0.0.10:8500 -template "/root/consul/nginx.ctmpl:/usr/local/nginx/conf/vhost/go.conf:/usr/local/nginx/sbin/nginx -s reload" --log-level=info
2020/12/01 08:25:40.094206 [INFO] (runner) initiating run
2020/12/01 08:25:40.095564 [INFO] (runner) rendered "/root/consul/nginx.ctmpl" => "/usr/local/nginx/conf/vhost/go.conf"
2020/12/01 08:25:40.095584 [INFO] (runner) executing command "/usr/local/nginx/sbin/nginx -s reload" from "/root/consul/nginx.ctmpl" => "/usr/local/nginx/conf/vhost/go.conf"
2020/12/01 08:25:40.095649 [INFO] (child) spawning: /usr/local/nginx/sbin/nginx -s reload

[root@server nginx]# cat /usr/local/nginx/conf/vhost/go.conf 
upstream http_backend {
    
     server 20.0.0.20:83;
    
     server 20.0.0.20:91;
    
}

server {
       listen 83;
       server_name localhost 20.0.0.10;
       access_log /var/log/nginx/go.cn-access.log;
       index index.html index.php;
       location / {
          proxy_set_header HOST $host;
          proxy_set_header X-Real-IP $remote_addr;
          proxy_set_header Client-IP $remote_addr; 
          proxy_set_header X-Fprwarded-For $proxy_add_x_forwarded_for;
          proxy_pass http://http_backend;
                 }
       }

删除一个nginx容器节点，并验证

[root@client ~]# docker stop 40f9d4dae6ff
40f9d4dae6ff
[root@client ~]# docker rm 40f9d4dae6ff
40f9d4dae6ff

[root@server bin]# consul-template -consul-addr 20.0.0.10:8500 -template "/root/consul/nginx.ctmpl:/usr/local/nginx/conf/vhost/go.conf:/usr/local/nginx/sbin/nginx -s reload" --log-level=info
2020/12/01 08:30:42.604648 [INFO] (runner) initiating run
2020/12/01 08:30:42.605731 [INFO] (runner) rendered "/root/consul/nginx.ctmpl" => "/usr/local/nginx/conf/vhost/go.conf"
2020/12/01 08:30:42.605759 [INFO] (runner) executing command "/usr/local/nginx/sbin/nginx -s reload" from "/root/consul/nginx.ctmpl" => "/usr/local/nginx/conf/vhost/go.conf"
2020/12/01 08:30:42.605798 [INFO] (child) spawning: /usr/local/nginx/sbin/nginx -s reload

[root@server nginx]# cat /usr/local/nginx/conf/vhost/go.conf 
upstream http_backend {
    
     server 20.0.0.20:91;
    
}

server {
       listen 83;
       server_name localhost 20.0.0.10;
       access_log /var/log/nginx/go.cn-access.log;
       index index.html index.php;
       location / {
          proxy_set_header HOST $host;
          proxy_set_header X-Real-IP $remote_addr;
          proxy_set_header Client-IP $remote_addr; 
          proxy_set_header X-Fprwarded-For $proxy_add_x_forwarded_for;
          proxy_pass http://http_backend;
                 }
       }

浏览器登陆nginx并刷新查看所有nginx容器日志文件显示IP地址为同一IP则完成轮询，新创建的nginx容器会自动加入template中轮询

image-20201201155828489

[root@client ~]# docker logs -f test-10
[root@client ~]# docker logs -f test-11
[root@client ~]# docker logs -f test-12
20.0.0.10 - - [01/Dec/2020:08:34:54 +0000] "GET / HTTP/1.0" 304 0 "-" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.66 Safari/537.36" "-"
20.0.0.10 - - [01/Dec/2020:08:34:55 +0000] "GET / HTTP/1.0" 304 0 "-" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.66 Safari/537.36" "-"
20.0.0.10 - - [01/Dec/2020:08:34:55 +0000] "GET / HTTP/1.0" 304 0 "-" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.66 Safari/537.36" "-"
God_ZY
关注
专栏目录
Docker Compose容器编排及consul集群
weixin_47403060的博客
12-01 296
文章目录一、Docker Compose 容器编排：二、Docker Compose 配置：（1）常用字段：（2）常用命令：（3）命令说明三、编排实例四、Docker concul 容器服务更新与发现（1）Consul：（2）建立 Consul 服务：四、搭建 consul 集群：（1）配置 consul 服务器：（2）查看集群信息（3）通过 httpd api 可以获取集群信息：（4）让容器服务自动加入 nginx 群集：（5）测试服务、功能是否都正常： 一、Docker Compose 容器编排： 1、
用docker-compose搭建consul集群环境
wang961226的博客
12-01 501
一、consul简介 1.1 什么是consul consul是HashCorp公司推出使用go语言编写的开源工具，用于实现分布式系统的服务发现与配置 1.2 consul的特性： 服务发现：支持服务发现。你可以通过 DNS 或 HTTP 的方式获取服务信息。 健康检查：支持健康检查。可以提供与给定服务相关联的任何数量的健康检查（如 web 状态码或 cpu 使用率）。 K/V 存储：键/值对存储。你可用通过 consul 存储如动态配置之类的相关信息。多数据中心：支持多数据中心，开箱即用。内外网的服务采用
单机consul，使用docker-compose
humanbeng的专栏
04-12 536
单机consul，使用docker-compose
docker-compose部署最新版本consul 单机版教程
love58的博客
05-23 301
【代码】docker-compose部署最新版本consul 单机版教程。
【docker】容器内部的网络
最新发布
weixin_43346403的博客
07-03 288
2.查看docker服务器的IP 地址。1.查看容器内部的IP地址。3.docker中的网络。
consul集群——docker-compose.yml
qq_41546518的博客
05-15 735
version: '3.6' services: consul1: image: consul:latest container_name: consul1 restart: always command: agent -server -client=0.0.0.0 -bootstrap-expect=3 -node=consul1 volumes: - /user/local/docker_my/consul/consul1/data:/co...
Docker网络模式
Kiro君的博客
07-18 645
直接使用bridge，无法支持指定IP运行docker//创建自定义网络#可以先自定义网络，再使用指定IP运行docker#docker1为执行ifconfig-a命令时，显示的网卡名，如果不使用--opt参数指定此名称，那你在使用ifconfig-a命令查看网络信息时，看到的是类似br-110eb56a0b22这样的名字，这显然不怎么好记。###mynetwork为执行dockernetworklist命令时，显示的bridge网络模式名称。...
【docker详解09】-docker网络
桂安俊@KylinOS
04-07 1270
1、docker网络类型 查看本地docker支持的网络类型 docker network ls docker的6种网络模式： bridge:默认网络驱动，用于单宿主机的docker容器和主机通信； overlay：叠加网络，用于连接多个宿主机Docker进程管理的容器和swarm services； macvlan：将容器的虚拟网卡直接连接在主机所在的物理网络上； host：Docker 17.06+ 创建swarm services时支持，容器直接使用docker主机的网卡和网络；
Docker-----compose搭建consul集群解析
m0_50854537的博客
03-14 5455
文章目录前言一、Docker Compose简介二、Docker compose配置信息2.1、Docker compose 配置常用字段2.2、Dokcer compose 常用命令2.3、Docker compose 命令参数详解三、Dokcer 编排实验3.1、下载compose3.2、建Nginx 前言 一个大型的Docker组成的微服务应用中，容器的数量是非常庞大的，如果依赖传统的人工配置方式进行维护，对于开发和运维来说简直就是噩梦。Compose的出现正是为了解决这个问题。 一、Docker C
docker-compose搭建consul集群
weixin_41648905的博客
11-14 806
使用docker-compose搭建consul集群compose编排docker compose简介docker compose编排文件格式docker compose配置常用字段基本使用格式composedockecompose编排nginx1.搭建docker环境2.安装docker-compose3.编写dockerfile文件3.配合dockerfile里面的信息，添加对应的文件到此目录，如运行脚本，ADD需要上传的文件4.编写yaml文件5.若涉及到数据卷，则需要在数据卷目录中放入指定文件6.d
docker资源限制与compose
Drw_Dcm的博客
10-19 7986
docker资源限制与compose
docker容器网络配置
m0_56681539的博客
08-10 2555
Docker网桥是宿主机虚拟出来的，并不是真实存在的网络设备，外部网络是无法寻址到的，这也意味着外部网络无法通过直接Container-IP访问到容器。如果容器希望外部访问能够访问到，可以通过映射容器端口到宿主主机（端口映射），即docker run创建容器时候通过 -p 或 -P 参数来启用，访问容器的时候就通过[宿主机IP]:[容器端口]访问容器。...
Docker学习（6） 容器网络
wang_8218的博客
04-10 2071
Docker 容器网络
docker容器网络
weixin_72901306的博客
08-10 3424
。。
Tomcat 系统架构（下）：聊聊多层容器的设计
小楼一夜听春雨，深巷明朝卖杏花
11-02 481
专栏上一期我们学完了连接器的设计，今天我们一起来看一下 Tomcat 的容器设计。先复习一下，上期我讲到了 Tomcat 有两个核心组件：连接器和容器，其中连接器负责外部交流，容器负责内部处理。具体来说就是，连接器处理 Socket 通信和应用层协议的解析，得到 Servlet 请求，而容器则负责处理 Servlet 请求。我们通过下面这张图来回忆一下。 容器，顾名思义就是用来装载东西的器具，在 Tomcat 里，容器就是用来装载 Servlet 的。那 Tomcat 的 Servlet 容器是如..
ip netns命令操作docker容器的网络
热门推荐
虾米的博客
08-31 1万+
（1）ip netns相关命令 1.增加虚拟网络命名空间   ip netns add ns    该命令会在/var/run/netns目录下创建ns网络命名空间名 2.显示所有的虚拟网络命名空间 root@wade-ThinkCentre-E73:~# ip netns list ns   也可通过查看/var/run/netns目录下的文件来list，结果一样
docker-compose 搭建 consul, registrator, consul-template,nginx环境。
04-21 3361
为了真实近似模拟线上，下面的配置都是一个服务一个docker-compose.yml文件。consulversion: '3.3' services:   consul:     image: consul     container_name: consul_server     network_mode: bridge      ports:       - 8300:8300       -...
容器学习 之 容器的网络类型(十二)
heihei
12-05 631
Docker 安装时会自动在 host 上创建三个网络，我们可用 docker network ls 命令查看： root@ubuntu:/myregistry/docker/registry/v2/repositories# docker network ls NETWORK ID NAME DRIVER SCOPE db...
docker-compose部署consul及使用
qq_24384579的博客
01-17 1万+
前言 在云计算和容器化技术发展火热的当下，对于微服务架构，服务注册与发现组件是必不可少的。在传统的服务架构中，服务的规模处于运维人员的可控范围内。当部署服务的多个节点时，一般使用静态配置的方式实现服务信息的设定。在微服务应用中，服务实例的数量和网络地址都是动态变化的，这对系统运维提出了巨大的挑战。因此，动态的服务注册与发现就显得尤为重要。 服务发现的选择 主流服务发现软件的对比： Soft...
docker compose容器编排
03-16
Docker Compose是一种容器编排工具，它可以通过一个YAML文件来定义和管理多个Docker容器。使用Docker Compose可以轻松地创建、启动、停止和删除多个容器，同时还可以定义容器之间的依赖关系和网络配置。Docker ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值