swarm集群搭建及弹性服务

1、环境准备
3台安装了docker的centos机器
防火墙开启以下端口或者关闭防火墙
. tcp端口2377，用于集群管理通信
. tcp和udp端口7946，用于节点之间通信
. udp端口4789，用于覆盖网络
2、机器分布
10.30.97.200 10.30.97.206作为manager节点
10.30.97.220 作为work节点
注：当然可以多个manager 多个work

3、创建集群
在任意节点下通过docker swarm init 命令创建一个新的swarm集群并加入，且该节点会默认变成manager节点，根据我们预先定义的角色，在作为管理节点的任意一台机器上运行该命令即可。

通常，第一个加入集群的管理节点将成为leader, 后来加入的管理节点都是reachable，当前的leader如果挂掉，所有的reachable将重新选择一个新的leader。

 docker swarm init --advertise-addr 10.30.97.200

4、加入集群
Docker 中内置的集群模式自带了公钥基础设施(PKI)系统，使得安全部署容器变得简单。集群中的节点使用传输层安全协议(TLS)对集群中其他节点的通信进行身份验证、授权和加密。

默认情况下，通过 docker swarm init 命令创建一个新的 Swarm 集群时，Manager 节点会生成新的根证书颁发机构（CA）和密钥对，用于保护与加入群集的其他节点之间的通信安全。

Manager 节点会生成两个令牌，供其他节点加入集群时使用：一个 Worker 令牌，一个 Manager 令牌。每个令牌都包括根 CA 证书的摘要和随机生成的密钥。当节点加入群集时，加入的节点使用摘要来验证来自远程管理节点的根 CA 证书。远程管理节点使用密钥来确保加入的节点是批准的节点。
　　
Manager

若要向该集群添加manager节点，管理节点先运行docker swarm join-token manager 命令查看管理节点的令牌信息。

docker swarm join-token manager

然后在其他节点上运行 docker swarm join 并携带令牌参数加入 Swarm 集群，该节点角色为 Manager。

Work

通过创建集群时候返回的结果可以得知，要向这个集群添加一个 Worker 节点，运行下图中的命令即可。或者管理节点先运行 docker swarm join-token worker 命令查看工作节点的令牌信息。

然后在其他节点上运行 docker swarm join 并携带令牌参数加入 Swarm 集群，该节点角色为 Worker。

5、查看集群信息
在任意 Manager 节点中运行 docker info 可以查看当前集群的信息。

docker info

6、查看集群节点
在任意 Manager 节点中运行 docker node ls 可以查看当前集群节点信息。

 docker node ls

代表当前节点，现在的环境为 32个管理节点构成 1 主 1 从，以及 21个工作节点。

节点 MANAGER STATUS 说明：表示节点是属于 Manager 还是 Worker，没有值则属于 Worker 节点。

Leader：该节点是管理节点中的主节点，负责该集群的集群管理和编排决策；
Reachable：该节点是管理节点中的从节点，如果 Leader 节点不可用，该节点有资格被选为新的 Leader；
Unavailable：该管理节点已不能与其他管理节点通信。如果管理节点不可用，应该将新的管理节点加入群集，或者将工作节点升级为管理节点。

节点 AVAILABILITY 说明：表示调度程序是否可以将任务分配给该节点。

Active：调度程序可以将任务分配给该节点；
Pause：调度程序不会将新任务分配给该节点，但现有任务仍可以运行；
Drain：调度程序不会将新任务分配给该节点，并且会关闭该节点所有现有任务，并将它们调度在可用的节点上。

7、删除节点

Manager

删除节点之前需要先将该节点的 AVAILABILITY 改为 Drain。其目的是为了将该节点的服务迁移到其他可用节点上，确保服务正常。最好检查一下容器迁移情况，确保这一步已经处理完成再继续往下。

   docker node update --availability drain 节点名称|节点ID

然后，将该 Manager 节点进行降级处理，降级为 Worker 节点。

    docker node demote 节点名称|节点ID

然后，在已经降级为 Worker 的节点中运行以下命令，离开集群。

   docker swarm leave

最后，在管理节点中对刚才离开的节点进行删除。

   docker node rm 节点名称|节点ID

Work

删除节点之前需要先将该节点的 AVAILABILITY 改为 Drain。其目的是为了将该节点的服务迁移到其他可用节点上，确保服务正常。最好检查一下容器迁移情况，确保这一步已经处理完成再继续往下。

  docker node update --availability drain 节点名称|节点ID

然后，在准备删除的 Worker 节点中运行以下命令，离开集群。

   docker swarm leave

最后，在管理节点中对刚才离开的节点进行删除。

   docker node rm 节点名称|节点ID

8、服务部署
注意：跟集群管理有关的任何操作，都是在 Manager 节点上操作的。

8.1. 创建服务
下面这个案例，使用 nginx 镜像创建了一个名为 mynginx 的服务，该服务会被随机指派给一个工作节点运行。

docker service create --replicas 1 --name mynginx -p 80:80 nginx

. docker service create：创建服务；
. --replicas：指定一个服务有几个实例运行；
. --name：服务名称。

8.2. 查看服务
可以通过 docker service ls 查看运行的服务。

可以通过 docker service inspect 服务名称|服务ID 查看服务的详细信息。

可以通过 docker service ps 服务名称|服务ID 查看服务运行在哪些节点上。

8.3. 调用服务
接下来我们测试一下服务是否能被正常访问，并且该集群下任意节点的 IP 地址都要能访问到该服务才行。

测试结果：3 台机器均可正常访问到该服务。

9、弹性服务

将 service 部署到集群以后，可以通过命令弹性扩缩容 service 中的容器数量。在 service 中运行的容器被称为 task（任务）。

通过 docker service scale 服务名称|服务ID=n 可以将 service 运行的任务扩缩容为 n 个。

通过 docker service update --replicas n 服务名称|服务ID 也可以达到扩缩容的效果。

将 mynginx service 运行的任务扩展为 5 个：

docker service scale mynginx=5

通过 docker service ps 服务名称|服务ID 查看服务运行在哪些节点上。

在 Swarm 集群模式下真正意义实现了所谓的弹性服务，动态扩缩容一行命令搞定，简单、便捷、强大。

10、删除服务
通过 docker service rm 服务名称|服务ID 即可删除服务。

11、滚动更新及回滚
以下案例将演示 Redis 版本如何滚动升级至更高版本再回滚至上一次的操作。

首先，创建 5 个 Redis 服务副本，版本为 5，详细命令如下：
　　
　　# 创建 5 个副本，每次更新 2 个，更新间隔 10s，20% 任务失败继续执行，超出 20% 执行回滚，每次回滚 2 个
　　
docker service create --replicas 5 --name redis
–update-delay 10s
–update-parallelism 2
–update-failure-action continue
–rollback-monitor 20s
–rollback-parallelism 2
–rollback-max-failure-ratio 0.2
redis:5

–update-delay：定义滚动更新的时间间隔；
–update-parallelism：定义并行更新的副本数量，默认为 1；
–update-failure-action：定义容器启动失败之后所执行的动作；
–rollback-monitor：定义回滚的监控时间；
–rollback-parallelism：定义并行回滚的副本数量；
–rollback-max-failure-ratio：任务失败回滚比率，超过该比率执行回滚操作，0.2 表示 20%。

然后通过以下命令实现服务的滚动更新。

docker service update --image redis:6 redis

回滚服务，只能回滚到上一次操作的状态，并不能连续回滚到指定操作。

docker service update --rollback redis