部署docker swarm(解决公有云环境网络问题)

最新推荐文章于 2025-10-02 04:13:52 发布
原创 最新推荐文章于 2025-10-02 04:13:52 发布 · 2k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#docker

本文详细介绍Docker Swarm集群的搭建过程，包括节点环境安装、集群初始化、服务发布及管理等核心步骤。此外，还介绍了Portainer的安装与使用方法，帮助读者掌握Swarm模式下多服务的统一管理。

文章目录

swarm部署

一、节点docker环境安装

  1. 安装yum-config-manager功能，另外两个是devicemapper驱动依赖
yum install -y yum-utils device-mapper-persistent-data lvm2
  1. 设置阿里yum源
yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
  1. 查看仓库中docker版本
yum list docker-ce --showduplicates | sort -r
  1. 指定版本安装
yum -y install docker-ce-18.03.1.ce
  1. 修改镜像仓库地址
[root@localhost docker]# cat /etc/docker/daemon.json 
{
  "registry-mirrors": ["https://kdsawiag.mirror.aliyuncs.com","https://registry.docker-cn.com"]
}

6.启动docker，加入开机启动

systemctl start docker
systemctl enable docker

二、swarm环境安装

官方的docker集群解决方案，实现对多台服务器中docker的互联互通、统一管理和部署。
通过一个或多个manage node关联一个或多个worker node，组成一个docker的集群环境。

1. swarm 管理节点初始化

  • –advertise-addr 参数指定管理节点公布IP，提供slaver加入
    记录命令结果信息，提供slaver节点加入集群
sudo docker swarm init --data-path-port 5789 避免云主机端口限制
[root@localhost ~]# docker swarm init --advertise-addr 192.168.1.61
Swarm initialized: current node (4dyxxume6yzdw9ysc9n3wumm1) is now a manager.

To add a worker to this swarm, run the following command:

    docker swarm join --token SWMTKN-1-27wow2lsk4ayyxt0v24vzi6gs3riyyagwp0mj3dl7c1d7viuo5-cjqb6d4pyvtjocechh4fix11j 192.168.1.61:2377

To add a manager to this swarm, run 'docker swarm join-token manager' and follow the instructions.
  • 防火墙设置
firewall-cmd --list-all

firewall-cmd --zone=public --add-port=2377/tcp --permanent
firewall-cmd --zone=public --add-port=7946/tcp --permanent
firewall-cmd --zone=public --add-port=7946/udp --permanent
firewall-cmd --zone=public --add-port=4789/tcp --permanent
firewall-cmd --zone=public --add-port=4789/udp --permanent
firewall-cmd --reload
  • 查看集群节点信息
[root@localhost ~]# docker node ls
  • 查看集群状态
[root@localhost ~]# docker info

以下端口必须是开放的：
    TCP port 2377为集群管理通信
    TCP and UDP port 7946 为节点间通信
    UDP port 4789 为网络间流量

2. slaver1节点加入swarm集群

  • 运行管理节点初始化后提供的 join 命令
  • 公有云环境服务器是nat网络，需要advertise-addr 指定本节点公网nodeIP
[root@worker1 ~]# docker swarm join --token SWMTKN-1-6akxqhk7syhoqexav7nnyfi96hwnaexgrm5hc3j38sqgaooks7-75co8fsybkm1qnzkgctouwn7r 121.36.169.*:2377 --advertise-addr 116.63.128.*:2377
  • 或者在管理节点找回命令
docker swarm join-token worker
  • slaver2节点执行相同操作

3. 服务发布

[root@localhost ~]# docker service create --replicas 1 --name nginx -p 2080:80  nginx:1.10

4. 管理命令

docker service ls 发布服务列表
docker service inspect nginx 查看服务详情
docker service ps nginx 查看服务详情

docker service scale nginx=5 伸缩副本数量
docker service rm helloworld 删除服务（同时容器停止）
docker service update --image redis:3.2.5-alpine redis 更新指定服务的镜像
docker service create --replicas 3 --name redis --update-delay 10s redis:3.0.7-alpine 指定镜像进行滚动更新

docker node update --availability drain worker02 下线指定节点（容器迁移到active节点）
docker node update --availability active worker2 指定节点上线

docker service update --publish-add published=8080,target=2368 ghost 指定已存在的服务暴露端口

5. 网络模式

docker的swarm模式使服务暴露给外部端口更加方便。所有的节点都在一个路由网络里。这个路由网络使得集群内的所有节点都能在开放的端口上接受请求。即使节点上没有任务运行，这个服务的端口也暴露的。路由网络路由所有的请求到暴露端口的节点上。

6. TIPS

1. swarm集群镜像同步
  • stack发布任务后，worker节点通过私有仓库pull镜像
通过如下命令，对源镜像文件tag、push
[root@master docker]# docker tag demo 192.168.1.61:5000/demo:latest
[root@master docker]# docker push 192.168.1.61:5000/demo
  • 通过compose.yml文件发布(或者portainer中stack功能)
    docker stack deploy -c compose.yml springboot-stack
[root@master docker]# cat compose.yml 
 version: '3'
 services:
  nginx:
    image: '192.168.1.61:5000/demo'
    ports:
      - "8081:8081"
    environment:
      - ALLOW_EMPTY_PASSWORD=yes
    deploy:
      replicas: 3

portainer部署

一、docker 下载

  • 下载yml文件
curl -L https://downloads.portainer.io/portainer-agent-stack.yml -o portainer-agent-stack.yml
  • 部署容器
docker stack deploy --compose-file=portainer-agent-stack.yml portainer

二、发布stacks(可包含多个service)

  • 菜单 Stacks - addStack
  • 编辑docker-compose文件
version: '3'
services:
  nginx:
    image: 'nginx:1.10'
    ports:
      - "80:80"
    environment:
      - ALLOW_EMPTY_PASSWORD=yes
    deploy:
      replicas: 1
  • Deploy the stack 按钮部署

三、swarm网络实现

  • Ingress

Ingress是swarm集群中每个node都默认存在的一种网络类型，它的作用是可以确保部署在集群中某个端口的服务始终保留该端口，不管实际运行容器的是哪个节点。

  • Overlay

Overlay网络可以将多个Docker守护进程连接在一起，使集群服务能够彼此通信

创建Overlay网络有以下几种方式：

  1. 在docker-compose.xml中通过network属性创建。如果不指定network，则会创建一个名为服务名_default的默认overlay网络，并且所以service都加入该overlay网络
  2. 使用docker network create手动创建，在创建service时手动指定network并加入

四、容器间网络通信

针对redis service、rebrow servvice进行测试

  1. 部署到同一个stack
  • 可通过集群任意IP访问
  • 可通过redis 容器名：redisTest_redis访问
version: '3'
services:
  redis:
    image: 'bitnami/redis:5.0'
    ports:
      - "6379:6379"
    environment:
      - ALLOW_EMPTY_PASSWORD=yes
    deploy:
      replicas: 1
  rebrow:
    image: 'marian/rebrow'
    ports:
      - "5001:5001"
    deploy:
      replicas: 1
  1. 分别部署到一个stack
  • 可通过集群任意IP访问
  • 不可通过容器名访问
  1. 手动创建Overlay网络，service中指定
docker network create --driver overlay swarm_test
docker service create --replicas 2 --name helloworld --network=swarm_test nginx:alpine

jenkins

一、安装

    1. 方法1
sudo wget -O /etc/yum.repos.d/jenkins.repo https://pkg.jenkins.io/redhat-stable/jenkins.repo
sudo rpm --import https://pkg.jenkins.io/redhat-stable/jenkins.io.key
yum install jenkins
    1. 方法2
wget https://pkg.jenkins.io/redhat/jenkins-2.156-1.1.noarch.rpm
rpm -ivh jenkins-2.156-1.1.noarch.rpm

二、配置

vim /etc/sysconfig/jenkins
#监听端口
JENKINS_PORT="8080"

#修改配置
$JENKINS_USER="root"

修改目录权限
chown -R root:root /var/lib/jenkins
chown -R root:root /var/cache/jenkins
chown -R root:root /var/log/jenkins

重启
service jenkins restart
ps -ef | grep jenkins

三、初始化

http:<ip或者域名>:8080
输入初始化密码：cat /var/lib/jenkins/secrets/initialAdminPassword

选择默认安装插件，创建管理员账户

四、war包升级

1. 下载升级包

http://updates.jenkins-ci.org/download/plugins/ssh/ 下载插件
[Manage Jenkins]->New version of Jenkins download 下载jenkins.war

2. 查看war包目录，替换后重启

[root@master ~]# rpm -ql jenkins
/usr/lib/jenkins/jenkins.war

mv /tmp/jenkins.war .
service jenkins restart

3. 手工更新插件

  1. 升级Jenkins 2.238后 管理页面插件报错
  2. http://updates.jenkins-ci.org/download/plugins/下载durable-task指定插件版本1.29
  3. 插件管理，手工上传后，重启应用恢复
  4. 安装SSh、maven插件

4. 构建

  1. jenkins服务端安装git，maven，jdk
  2. jenkins全局配置中
  • jdk JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk
  • git 默认
  • maven MAVEN_HOME=/usr/share/maven
  1. 修改maven仓库地址为阿里云
vi /usr/share/maven/conf/settings.xml
 <mirrors>
    <mirror>
        <id>nexus-aliyun</id>
        <mirrorOf>central</mirrorOf>
        <name>Nexus aliyun</name>
        <url>http://maven.aliyun.com/nexus/content/groups/public</url>
    </mirror>
  </mirrors>
  1. 新建任务
    FreeStyle project

  • 设置源码管理（git仓库配置）
    https://gitee.com/chenenxiong/mall-swarm.git
    添加凭证

  • 构建springboot依赖

    • 目标：clean install -pl mall-common,mall-mbg,mall-security -am (先构建被依赖的模块)
      POM：${WORKSPACE}/pom.xml

    • 目标：clean package
      POM：${WORKSPACE}/mall-registry/pom.xml

5.部署

  • 通过jenkins调用maven构建，手工上传jar包到服务器启动
    • springboot打包jar结果路径： /root/.m2/repository/com/example/mall/mall-admin/1.0-SNAPSHOT/mall-admin-1.0-SNAPSHOT.jar
    • Build中，配置完成后动作：上传服务器，执行脚本…
  • 通过maven配置docker插件，maven构建后自动上传到docker服务器镜像中
    • 指定配置后操作，调用shell脚本启动容器
对决：Kubernetes vs Docker Swarm - 谁才是最优秀的容器编排方案？
陈书予
03-25 4281
容器编排是指管理容器化应用程序的过程。在容器编排中，工具/平台对容器生命周期的管理十分重要，例如自动化容器部署、动态资源管理、自我修复等。在这篇文章中，我们将比较Kubernetes和Docker Swarm两种容器编排技术。Kubernetes是一个开源平台，用于自动部署、扩展和管理容器化应用程序。Kubernetes支持自动化容器部署、动态资源管理、自我修复和水平扩展，基于Kubernetes的容器编排对应用程序的运维和管理具有重要意义。
Docker容器实现跨宿主机通信
zhaorongxi的博客
10-09 5975
目前大家使用docker容器来部署服务越来越普遍,当我们需要在多个docker容器里实现跨宿主机通信时就会遇到网络问题,本文就此问题提供解决方案
Docker跨主机访问
设xy为0的博客
01-01 980
一. 为什么要跨主机访问？ ​ 在工作中docker容器会部署在不同的服务器中，那么就涉及到不同的机器间容器的相互通信。我们都知道docker-compose用于容器编排，但是只能解决单台服务器上容器间的通信问题。在本课程中我们将实现不同的服务器间容器的通信。 ​ 我们采用的技术是weave，属于第三方网络项目，基于UDP的数据传输，其工作原理是创建一个连接多个主机的虚拟网络，类似于一个以太网交换...
深入理解 Docker 网络——多机通信及 Docker Swarm 实战
一束尘光的技术分享
12-13 1434
网络是云原生的灵魂，这篇文章将带你深入理解 Docker 在多机中是如何通信的
Docker Compose 中 Swarm 模式下 Overlay 网络问题的分析与解决
gitblog_00074的博客
09-11 311
在 Docker Swarm 集群环境中，用户经常遇到一个典型问题：当使用 Docker Compose 在 worker 节点上部署服务时，会遇到 "network not found" 错误，尽管该 overlay 网络已经在 manager 节点上创建。本文将深入分析这一问题的根源，并提供多种解决方案。 ## 问题现象 在 Swarm 模式下创建 overlay 网络后，worker 节...
docker第十四章：Docker Swarm
m0_66021949的博客
12-05 1129
一、什么是Docker Swarm。
彻底搞懂Docker网络原理之跨主机通信
小方的专栏
05-13 4196
一、背景 在前一篇文章彻底搞懂Docker网络原理之单机通信中，列举了在单主机场景下docker容器之间的通信方式。这篇文章主要介绍跨主机的docker容器之间的通信方式。 二、准备 虚拟机 笔者在Mac上通过docker-machine创建了3个虚拟机，前提是已经安装好docker engine、docker machine、visualbox，如果已经有现成的服务器可以跳过这步 $ docke...
Docker：跨主机通信
onlooker_C的博客
07-25 1287
Docker：跨主机通信
使用Bash脚本快速部署Docker Swarm集群在Azure上
总结来说，该Bash脚本简化了在Azure上创建和管理Docker Swarm集群的过程，降低了操作的复杂性，并为在云上部署分布式应用提供了一种高效的方式。通过遵循上述步骤和最佳实践，开发者和系统管理员可以更快速地部署和...
Docker Compose与Swarm集成多云环境部署示例
本项目“docker-compose-machine-swarm-cloud-example”正是围绕这三项技术展开，并进一步扩展至多云环境下的实际应用示例，展示了如何在多个主流云服务提供商（如 AWS、Azure、DigitalOcean 等）之间实现跨平台的...
Docker Swarm跨平台部署实践：从VirtualBox到AWS/Azure云服务
2. **OVH Openstack**: 一种开源的云计算平台，用于构建和管理公有云、私有云和混合云环境。`init-ovh.sh` 脚本用于自动创建并启动 Docker Swarm 集群。 3. **Microsoft Azure**: 微软提供的云计算服务，它提供了...
17、Docker存储驱动与公有云部署指南
最新发布
gpu4optimizer的博客
10-02 13
本文深入解析了Docker的存储驱动机制，对比分析了Device Mapper、AuFS和OverlayFS的性能特点与适用场景，并探讨了四种Docker数据卷管理方式。同时，详细介绍了在AWS ECS和Microsoft Azure容器服务上部署Docker的完整流程，包括架构组成、配置步骤、故障排除及集群更新策略，帮助用户在公有云环境中高效部署和管理容器化应用。
十、Docker网络以及跨宿主机通信
TiagoHX
12-04 4655
讲在前面： 1.目前实现的是单机部署，如何创建镜像，管理镜像；如何创建容器，管理容器；如何快速创建docker虚拟主机machine，如何快速部署多组件项目compose以及如何跨宿主机建立集群swarm。 2.docker单机通信是docker0桥接eth0，那么跨主机如何使得不同的eth0之间以及docker0之间实现通信呢？ 这就是这儿要学习的地方了。再给自己科普一下基础的网络原理 二层
docker跨主机通信
Arcticking
08-10 821
一、macvlan macvlan是真正意义上的桥接网络，在网络结构上跟宿主机平级，宿主机网卡需要开启混杂模式，允许容器数据通过。 但是macvlan模式容器和宿主机之间不能互访 macvlan bridge 模式： 1、创建macvlan网络： docker network create -d macvlan --subnet=172.30.0.0/24 --ga...
Docker跨主机通讯
dyfrisivkcfj的博客
06-07 1452
docker跨主机通信
Docker跨主机网络通信
04-12 447
Docker跨主机网络通信 一、描述 由于应用较多单个节点部署docker应用对服务器要求较高，故想在多台宿主机中部署docker应用，由于项目使用微服务注册发现，故使用端口影射方式较为麻烦，需要在dcoker网段之间跨主机通信，预研方式：直接路由、OVS、flannel三种方式；本次讲解使用直接路由方式处理跨主机容器之间互联。 二、环境描述 虚拟机1： ip:172.19.12.15 docker0网段：10.244.2.0/24 本机网卡名称：ens192 虚拟机2： ip:172.1
Docker Swarm网络管理
focus：Follow One Cause Until Success
01-15 1304
ingress网络主要对集群中的服务进行负载均衡。未设置ingress网络的情况下，将会影响集群多分片任务的使用。在Docker网络中，有且仅有一个ingress类型网络，Docker允许你手动自定义ingress网络。若是先有的网络中存在冲突网段，需要修改ingress网络。可以收到删除先有的ingress网络，重新创建ingress网络，指定网段。在删除ingress网络前，需要先停止ingress连接的服务删除现有的ingress网络创建新的ingress网络。
Docker实现跨主机通信
u012429202的博客
07-09 1417
Docker实现跨主机通信
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值