《Linux运维实战：Centos7.6基于ansible一键离线部署rabbitmq3.9.16+haproxy高可用镜像模式集群》

已于 2023-03-04 16:23:53 修改
阅读量675 收藏
点赞数
分类专栏： 《Linux运维实战总结》 文章标签： ansible docker docker-compose rabbitmq镜像集群
于 2023-02-24 14:06:25 首次发布
本文为博主原创文章，未经博主允许不得转载。
本文链接：https://blog.csdn.net/m0_37814112/article/details/129199689
版权

一、部署背景

由于业务系统的特殊性，我们需要针对不同的客户环境部署 rabbitmq+haproxy高可用镜像模式集群，由于大都数用户都是专网环境，无法使用外网，为了更便捷，高效的部署，针对业务系统的特性，我这边编写了基于ansible自动化工具， 一键远程离线部署rabbitmq+haproxy高可用镜像模式容器版集群，当然也会编写二进制版本，敬请期待吧！

说明：如果有兴趣，可以从工具下载中获取下载链接，此工具可帮助你快速了解一个自动化部署工具是如何编写的？

二、功能简介

1、支持 1台主机一键远程部署rabbitmq单实例。
2、支持 1台主机一键远程部署rabbitmq+haproxy高可用镜像模式集群+（1个磁盘节点+2个内存节点+1个haproxy节点）。
3、支持 2台或3台主机一键远程部署rabbitmq+haproxy高可用镜像模式集群（1个磁盘节点+1个内存节点+1个haproxy节点）。
3、支持 3台或4台主机一键远程部署rabbitmq+haproxy高可用镜像模式集群（1个磁盘节点+2个内存节点+1个haproxy节点）。
5、支持一键部署所有节点或单个rabbitmq和haproxy实例依次部署、启动、停止、重启、检查、移除等功能。
6、 支持数据目录、日志目录、插件目录、IP地址、端口、内存阀值、磁盘阀值、账号、密码等参数的灵活配置。
7、 支持数据目录、日志目录、插件目录、配置文件目录等持久化。

三、工具下载

基于ansible一键离线部署rabbitmq+haproxy高可用镜像模式容器版分布式集群工具

四、工具说明

目录结构如下：
在这里插入图片描述

目录说明如下：

#1、ansible目录：存放ansible工具rpm包目录，可一键安装ansible
#2、cluster目录：存放hosts文件和config.yml文件目录，主要配置服务器信息及rabbitmq+haproxy高可用镜像模式集群配置信息
#3、example目录：存放hosts文件和config.yml模板文件
#4、images目录：存放rabbitmq+haproxy高可用镜像模式集群镜像文件,部署工具中所涉及到的镜像皆为官方镜像
#5、op.sh：rabbitmq+haproxy高可用镜像模式集群部署的主控脚本
#6、pkgs：存放sshpass和nc命令的rpm包文件
#7、playbooks：rabbitmq+haproxy高可用镜像模式集群部署的剧本文件
#8、README.txt：帮助文档
#9、roles目录：rabbitmq+haproxy高可用镜像模式集群部署的角色文件

README.txt文件内容如下：
在这里插入图片描述

op.sh主控脚本参数如下：
在这里插入图片描述

其中代码行数：5828行，使用shell语言+jinja2语言。
在这里插入图片描述

五、部署要求

1、建议提前关闭好防火墙和selinux。
2、rabbitmq+haproxy模式镜像集群是基于docker和docker-compose工具， 所以rabbitmq+haproxy模式镜像集群主机上提前安装好docker和docker-compose工具。

六、部署步骤

说明：根据主机数量，请选择一台主机作为主控端，其它主机作为受控端，如果服务器数量为1台，则即可为主控端，又可为受控端。主控端需提前安装好ansible工具。这里为了避免麻烦，特意写了一个离线的ansible部署脚本，可实现一键部署ansible。脚本已经集成到该工具中，开箱即用，非常方便！

在这里插入图片描述

由于文章篇幅有限，这里就只介绍，在4台主机上，如何使用ansible工具实现rabbitmq镜像模式分布式集群的一键容器化部署？

1、生成hosts文件和config.yml文件

[root@localhost rabbitmq]# ./op.sh new node3
2023-02-24 11:33:35 DEBUG generate custom cluster files in /opt/rabbitmq/cluster/node3
2023-02-24 11:33:35 DEBUG cluster node3: files successfully created.
2023-02-24 11:33:35 INFO next steps 1: to config '/opt/rabbitmq/cluster/node3/hosts'
2023-02-24 11:33:35 INFO next steps 2: to config '/opt/rabbitmq/cluster/node3/config.yml'

2、编辑hosts文件

注意：base_dir变量无需修改，这个变量是自动生成的，只需修改服务器ip地址、ssh端口、账号密码等信息即可。

# 服务名称：rabbitmq镜像集群
# 服务器支持： <最多支持3台服务器>
# 网络环境要求：<适用于企业或单位内网环境\互联网环境>
# 说明：根据实际服务器数量进行部署规划，如不清楚，建议咨询公司运维工程师
# 部署类型：使用3台主机部署rabbitmq镜像集群
[rabbitmq_cluster_1]
192.168.1.191 ansible_ssh_port=22 ansible_ssh_user=root ansible_ssh_pass=123456 ansible_python_interpreter=/usr/bin/python2.7

[rabbitmq_cluster_2]
192.168.1.192 ansible_ssh_port=22 ansible_ssh_user=root ansible_ssh_pass=123456 ansible_python_interpreter=/usr/bin/python2.7

[rabbitmq_cluster_3]
192.168.1.193 ansible_ssh_port=22 ansible_ssh_user=root ansible_ssh_pass=123456 ansible_python_interpreter=/usr/bin/python2.7

[haproxy]
192.168.1.194 ansible_ssh_port=22 ansible_ssh_user=root ansible_ssh_pass=123456 ansible_python_interpreter=/usr/bin/python2.7

# 为主机组指定变量,作用范围为整个主机组
[all:vars]

# Deploy Directory (rabbitmq镜像集群一键部署工具包workspace),不修改
base_dir="/opt/haproxy_rabbitmq"

3、编辑config.yml文件

# 使用3台服务器部署3个实例rabbitmq镜像模式分布式集群
#################################################公共变量########################################################
# 宿主机最大磁盘空间分区下目录,比如说"/"分区下空间最大，就在"/"分区下创建一个data目录
MAX_SPACE_DIR: "/data"

# rabbitmq工作目录,主要用来存放离线镜像及其它部署相关文件,默认不修改
RABBITMQ_WORK_DIR: "{{ MAX_SPACE_DIR }}/pkgs/rabbitmq-cluster"

# rabbitmq数据存放根目录,主要用来存放数据、日志、插件、配置文件等,默认不修改
RABBITMQ_DATA_DIR: "{{ MAX_SPACE_DIR }}/basic-data/rabbitmq-cluster"

# 默认用户密码,可根据实际情况填写,注意密码格式为<大小写英文字母+数字>,根据实际情况填写
RABBITMQ_DEFAULT_USER: "lolaage"
RABBITMQ_DEFAULT_PASS: "XnZKE7jGOn6SRXG"

# 内存告警阀值(相对值),建议值为0.4~0.7区间,根据实际情况修改
# 当MQ服务器使用超过内存阀值时,会触发告警,并阻塞所有正在发布消息的连接 
VM_MEMORY_HIGH_WATERMARK_RELATIVE: "0.6"

# 数据目录磁盘空间阀值(绝对值),根据实际情况修改
# 当MQ服务器数据目录的磁盘空间超过阀值时,会触发告警,并阻塞所有正在发布消息的连接
DISK_FREE_LIMIT_ABSOLUTE: "5GB"
#####################################################<mq1磁盘节点变量>#########################################
# mq1节点宿主机内网ip地址,必须与主机清单hosts文件中定义的[rabbitmq_cluster_1]组中定义的IP相同
RABBITMQ_NODE1_HOST: "192.168.1.191"

# mq1节点供客户端建立连接端口,端口不冲突情况下,默认不修改
RABBITMQ_NODE1_PORT: "5672"

# mq1节点web页面管理端口,端口不冲突情况下,默认不修改
RABBITMQ_NODE1_MANAGEMENT_PORT: "15672"

# mq1节点用于节点间和CLI工具通信端口,端口不冲突情况下,默认不修改 
# 注意：端口号必须设置为RABBITMQ_NODE1_DIST_PORT = RABBITMQ_NODE1_PORT + 20000
RABBITMQ_NODE1_DIST_PORT: "25672"

# mq1节点epmd用于节点间通信和CLI工具通信的端口,集群中的所有主机必须使用相同的端口 ,端口不冲突情况下,默认不修改
# 注意: 如果修改当前变量,则必须确保RABBITMQ_NODE2_ERL_EPMD_PORT与RABBITMQ_NODE1_ERL_EPMD_PORT以及RABBITMQ_NODE3_ERL_EPMD_PORT的端口号相同 
RABBITMQ_NODE1_ERL_EPMD_PORT: "4369"
#####################################################<mq2内存节点变量>#########################################
# mq2节点宿主机内网ip地址,必须与主机清单hosts文件中定义的[rabbitmq_cluster_2]组中定义的IP相同
RABBITMQ_NODE2_HOST: "192.168.1.192"

# mq2节点供客户端建立连接端口,端口不冲突情况下,默认不修改
RABBITMQ_NODE2_PORT: "5672"

# mq2节点web页面管理端口,端口不冲突情况下,默认不修改
RABBITMQ_NODE2_MANAGEMENT_PORT: "15672"

# mq2节点用于节点间和CLI工具通信端口,端口不冲突情况下,默认不修改 
# 注意：端口号必须设置为RABBITMQ_NODE2_DIST_PORT = RABBITMQ_NODE2_PORT + 20000
RABBITMQ_NODE2_DIST_PORT: "25672"

# mq2节点epmd用于节点间通信和CLI工具通信的端口,集群中的所有主机必须使用相同的端口 ,端口不冲突情况下,默认不修改
# 注意: 如果修改当前变量,则必须确保RABBITMQ_NODE3_ERL_EPMD_PORT与RABBITMQ_NODE2_ERL_EPMD_PORT以及RABBITMQ_NODE3_ERL_EPMD_PORT的端口号相同 
RABBITMQ_NODE2_ERL_EPMD_PORT: "4369"
#####################################################<mq3内存节点变量>#########################################
# mq3节点宿主机内网ip地址,必须与主机清单hosts文件中定义的[rabbitmq_cluster_3]组中定义的IP相同
RABBITMQ_NODE3_HOST: "192.168.1.193"

# mq3节点供客户端建立连接端口,端口不冲突情况下,默认不修改
RABBITMQ_NODE3_PORT: "5672"

# mq3节点web页面管理端口,端口不冲突情况下,默认不修改
RABBITMQ_NODE3_MANAGEMENT_PORT: "15672"

# mq3节点用于节点间和CLI工具通信端口,端口不冲突情况下,默认不修改 
# 注意：端口号必须设置为RABBITMQ_NODE3_DIST_PORT = RABBITMQ_NODE3_PORT + 20000
RABBITMQ_NODE3_DIST_PORT: "25672"

# mq1节点epmd用于节点间通信和CLI工具通信的端口,集群中的所有主机必须使用相同的端口 ,端口不冲突情况下,默认不修改
# 注意: 如果修改当前变量,则必须确保RABBITMQ_NODE1_ERL_EPMD_PORT与RABBITMQ_NODE2_ERL_EPMD_PORT以及RABBITMQ_NODE3_ERL_EPMD_PORT的端口号相同 
RABBITMQ_NODE3_ERL_EPMD_PORT: "4369"
#####################################################<haproxy节点变量>#########################################
# haproxy节点宿主机内网ip地址,必须与主机清单hosts文件中定义的[haproxy]组中定义的IP相同
HAPROXY_NODE_HOST: "192.168.1.194"

# rabbitmq工作目录,主要用来存放离线镜像及其它部署相关文件,默认不修改
HAPROXY_WORK_DIR: "{{ MAX_SPACE_DIR }}/pkgs/haproxy"

# rabbitmq数据存放根目录,主要用来存放数据、日志、配置文件等,默认不修改
HAPROXY_DATA_DIR: "{{ MAX_SPACE_DIR }}/basic-data/haproxy"
  
# rabbitmq镜像集群实例数量,切记不能修改
RABBITMQ_INSTANCE_NUM: "3"
  
# haproxy节点<rabbitmq集群业务负载均衡端口>,端口不冲突情况下,建议不修改
HAPROXY_NODE_PROXY_RABBITMQ_PORT: "5673"

# haproxy节点<rabbitmq集群管理页面负载均衡端口>,端口不冲突情况下,建议不修改
HAPROXY_NODE_PROXY_RABBITMQ_MANAGEMENT_PORT: "15673"

# haproxy管理页面端口,端口不冲突情况下,建议不修改
HAPROXY_MANAGEMENT_PORT: "15000"

# haproxy管理页面登录账号和面,根据实际情况填写
HAPROXY_DEFAULT_USER: "admin"
HAPROXY_DEFAULT_PASS: "admin@123"

4、执行部署操作

说明：如果不清楚部署操作命令，可使用其帮助命令，如下所示
在这里插入图片描述

一键部署服务

#方式一：一键部署所有节点
[root@localhost haproxy_rabbitmq]# ./op.sh setup node3 all

#方式二：单个节点依次部署
[root@localhost haproxy_rabbitmq]# ./op.sh setup node3 08 
[root@localhost haproxy_rabbitmq]# ./op.sh setup node3 09 
[root@localhost haproxy_rabbitmq]# ./op.sh setup node3 10 
[root@localhost haproxy_rabbitmq]# ./op.sh setup node3 11

一键部署结果，如下图所示：
在这里插入图片描述

查看rabbitmq集群节点信息，如下图所示：

http://192.168.1.194:15673
在这里插入图片描述

查看haproxy管理页面信息，如下图所示：

http://192.168.1.194:15000/rabbitmq-stats
在这里插入图片描述

总结：使用ansible自动化工具一键部署rabbitmq+haproxy高可用镜像模式集群，效率确实非常高，全程部署2分钟就完全搞定了，对于一些需要多次部署的场景，自动化确实很重要，可以极大的提高整个部署效率，我觉得对于运维来说，一定要有高度的自动化意识，当然这只是单个服务模块的自动化部署，如果是把整个业务系统，编写成一键自动化部署工具的化，这可能是一个非常的工程，当然，后期有机会我也会进行分享整个业务系统的一键部署是如果设计及编写的。

总结：整理不易，如果对你有帮助，可否点赞关注一下？

更多详细内容请参考：《Linux运维篇：Linux系统运维指南》

东城绝神
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
【云原生】k8s 一键部署（ansible）
KRYST4L123的博客
03-08 1360
一、概述前面我写了关于k8s环境部署的几篇文章，k8s部署还是比较麻烦的，所以是有必要考虑一键部署的方案，这里借助ansible playbook来实现k8s环境的一键部署，实现快速部署的目的。节点信息k8s 架构图：基于ansible部署k8s流程图：二、Ansible 部署1）开启记录日志配置文件：/etc/ansible/ansible.cfg2）去掉第一次连接ssh ask确认3）配置hosts配置文件：/etc/ansible/hosts测试连通性。
Linux运维实战：CentOS76操作系统从入门到精通.docx
09-13
Linux 运维实战：CentOS76 操作系统从入门到精通 本资源是关于 Linux 运维实战的全面指南，涵盖了 CentOS76 操作系统从入门到精通的所有方面。通过本资源，您将了解 Linux 系统的概述、CentOS76 的安装和基础配置、...
rabbitmq-cluster:使用 Ansible 对 RabbitMQ 进行集群
06-30
rabbitmq-cluster 使用 Ansible 对 RabbitMQ 进行集群 它是什么？ Ansible playbook 和 vagrant 开发环境，用于跨 N 个节点安装 RabbitMQ 代理集群。 入门 brew cask install virtualbox brew cask install vagrant vagrant plugin install vagrant-hostmanager vboxmanage hostonlyif create vboxmanage hostonlyif ipconfig vboxnet0 --ip 10.125.0.1 --netmask 255.255.255.0 vboxmanage dhcpserver remove --ifname vboxnet0 vagrant up 这个存储库主要来源于。
centos7部署RabbitMQ集群
xinhuixu博客
07-20 216
第1步-设置主机文件 1.我们将在所有服务器上编辑“ / etc / hosts”文件，并将每个服务器IP地址映射为主机名。 vim /etc/hosts 现在，在其中粘贴以下配置。 10.0.15.21 node01 10.0.15.22 node02 10.0.15.22 node03 把之前的主机名隐藏掉 vim /etc/hostname 改成对于的主机名 reboot重启一下 服务器 第2步-安装RabbitMQ服务器
debian10.9离线安装haproxy(附离线安装包)
wumengjie0418的博客
12-05 7007
废话不多说，上步骤，首先准备如下安装包 ： debian10.9离线安装haproxy 执行如下命令： 成功！查看一下：
centos stream 8 安装haproxy
qq_39009944的博客
03-21 718
准备工作： 需要安装docker,本次docker用于安装httpd,用于模拟两台服务器。 最终用于验证haproxy是否安装成功 centos stream 8安装docker的教程地址： https://blog.csdn.net/qq_39009944/article/details/123632823?spm=1001.2014.3001.5501 1.docker安装httpd [root@localhost ~]# docker pull httpd:2.4.37-al
RabbitMq+Haproxy
11-27
在这里，我们将讲解如何在 Centos 6.8 下安装和配置 RabbitMq 集群，并使用 Haproxy 实现高可用的负载均衡。 一、 系统参数 在开始安装之前，我们需要了解一些系统参数。RabbitMq 需要 Erlang 语言的支持，因此...
RabbitMQ3.9.15安装包及安装文档
11-09
10. **故障恢复与高可用性**：RabbitMQ支持集群模式，通过将多个节点组成集群，可以提高系统的可用性和容错性。理解如何配置和管理RabbitMQ集群是实现高可用性的关键。 以上是关于RabbitMQ 3.9.15安装和使用的主要...
基于Centos系统使用Ansible一键部署K8S1.24.12二进制集群自动化工具
08-03
2、支持 单机、一主多从、两主多从、三主多从等四种部署架构和六种部署模式的二进制K8S离线集群，且 证书有效期为99年。 3、支持一键部署、启动、停止、检查、集群备份（etcd）、集群恢复（etcd）、集群移除等功能。...
2019Linux运维入门课程：基于centos7.6讲解.zip
08-13
《Linux运维入门课程：基于CentOS 7.6讲解》 在IT领域，Linux操作系统以其稳定性和开源特性深受广大运维人员的青睐。本课程以CentOS 7.6为平台，详细介绍了Linux运维的基础知识，旨在帮助初学者快速入门。课程内容...
ansible-playbook_rabbitmq
11-25
RabbitMQ是实现了高级消息队列协议（AMQP）的开源消息代理软件（亦称面向消息的中间件）。RabbitMQ服务器是用Erlang语言编写的，而集群和故障转移是构建在开放电信平台框架上的。所有主要的编程语言均有与代理接口通讯的客户端库。 ansible 是一款轻量级自动化运维工具，由的 Python 语言开发，结合了多种自动化运维工具的特性，实现了批量系统配置，批量程序部署，批量命令执行等功能; ansible 是基于模块化实现批量操作的。
ansible一键部署.zip
04-24
ansible一键部署中小型网站架构，应用了nginx（负载均衡）+keepalived(非抢占模式)，tomcat（单机多实例）+supervisor(管理),nfs(共享文件存储),rsync+crond(定时备份),zabbix（邮件报警）
《Linux运维实战：Centos7.6基于docker-compose一键离线部署rabbitmq3.9.16镜像模式集群》
东城绝神
02-17 430
《Linux运维实战：Centos7.6基于docker-compose一键离线部署rabbitmq3.9.16镜像模式集群》
centOS6.5离线安装rabbitMQ
Phor的博客
06-14 391
离线安装rabbitMQ
Centos7下安装RabbitMQ教程
Z1366566161664的博客
02-25 3807
Centos7下安装RabbitMQ教程
Linux-CentOS7离线安装RabbitMq
csdn_yasin的博客
01-02 6353
说明 CentOS7离线安装RabbitMq 操作步骤 》撸一下官方 官方文档：https://www.rabbitmq.com/install-rpm.html#overview 来自 RabbitMQ 的零依赖 Erlang 官方的话：Zero-dependency Erlang from RabbitMQ Zero dependency Erlang RPM package for running RabbitMQ can be installed from a direct download
基于 CentOS 7 环境部署 Ansible 及使用
派大星的不眠博客
07-04 2948
Ansible 是一种开源的自动化工具，用于配置和管理计算机系统、应用程序和网络设备。它采用简单易懂的 YAML 或 JSON 形式的剧本（playbook）语法，并通过 SSH 协议与远程主机进行通信。简单易用: Ansible 的语法简洁明了，易于理解和编写。使用基于文本的 YAML 或 JSON 格式描述配置任务，无需编写复杂的脚本或程序。轻量级: Ansible 使用代理少或无代理的架构，在被管理的主机上不需要额外的软件或永久性的运行进程。这使得安装和管理 Ansible 变得十分简便。
HAProxy安装及简单配置
leaves_ye的博客
11-07 732
HAProxy简要安装及配置步骤
HaProxy安装/启动/简单配置
热门推荐
happyfly的博客
07-21 2万+
Haproxy 虽然带着ha，但它做的确是负载均衡。haproxy是工作在四层之上的，这也就意味着它可以代理的服务要比nginx更广泛，性能比nginx也要更高一些。相比较lvs，可配置性又比较好，需要的机器没有lvs那么多。因此haproxy在一定需求下使用还是不错的。比如使用haproxy来对mysql的从节点进行负载均衡。下面我们就来简单的使用haproxy来进行MySQL的负载均衡。  ...
linux 运维实战:centos7.6 操作系统从入门到精通 doc88
最新发布
01-22
《Linux运维实战:CentOS7.6操作系统从入门到精通》是一本介绍CentOS 7.6操作系统的实用指南。该书主要介绍了CentOS 7.6操作系统的基础知识、安装与配置、系统管理、网络管理、存储管理、安全管理等方面的内容，适合...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

东城绝神

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值