RabbitMQ（十）【高级 - 集群】

已于 2022-08-29 09:49:23 修改
阅读量1k 收藏 1
点赞数
分类专栏： RabbitMQ 文章标签： java-rabbitmq rabbitmq java
于 2022-08-28 23:54:08 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Wei_Naijia/article/details/126576353
版权

十、RabbitMQ - 高级 - 集群

上一篇文章《内存磁盘的监控》

RabbitMQ 集群

RabbitMQ 这款消息队列中间件产品本身是基于 Erlang 语言天生具备分布式特性（通过同步 Erlang 集群个节点的 magic cookie 来实现）。因此，RabbitMQ 天然支持 Clustering。这便得 RabbitMQ 本身不需要像 ActiveMQ、Kafka那样通过 Zookeeper 分别来实现 HA 方案和保存集群和元数据。集群是保证可靠性得一种方式，同时可以通过水平扩展以达到增加消息吞吐量能力得目的

在实际使用过程中采取多机多实例部署方式

主要参考官方文档：https://www.rabbitmq.com/clustering.html

10.1 集群搭建（在Linux虚拟机上使用docker部署）

配置得前提是rabbitmq服务可以运行起来，比如ps aux|grep rabbitmq可以看到相关进程，又比如运行rabbitmqctl status可以看到rabbitmq得运行状态

# 查看 rabbitmq 进程
[root@vinjcent /]# ps aux|grep rabbitmq

在这里插入图片描述

或者

# 查看 RabbitMQ 进程状态
[root@vinjcent /]# systemctl status rabbitmq-server

【注】确保 RabbitMQ 可以运行，确保完成之后，需要将 RabbitMQ 服务停止，后台看不到RabbitMQ得进程为止

# 停止 RabbitMQ 服务
[root@vinjcent /]# systemctl stop rabbitmq-server

环境准备

  • docker
  • java环境
# 获取rabbitmq镜像
[root@vinjcent rabbitmq]# docker pull rabbitmq:3.10.5-management

单机实例搭建

# 创建容器并启动
[root@bogon ~]# docker run -d -it --rm --name rabbitmq -p 5672:5672 -p 15672:15672 rabbitmq:3.10.5-management

测试本地访问：http://192.168.159.100:15672/#/

默认账号密码是guest，guest

注意：如果运行容器过程出现错误，重启一下docker就可以解决了systemctl restart docker

docker: Error response from daemon: driver failed programming external connectivity on endpoint rabbitmq01 (77f97c9602f7d8490cc4ac82f67e846b0ed09ba7d1849aa83b2adcad465b2d53): (iptables failed: iptables --wait -t nat -A DOCKER -p tcp -d 0/0 --dport 15673 -j DNAT --to-destination 172.17.0.2:15672 ! -i docker0: iptables: No chain/target/match by that name.

集群模式搭建

  1. 首先创建容器映射目录，用于共享容器文件
# 创建rabbitmq用于存放rabbitmq集群映射信息
mkdir /mydata/rabbitmq
# 分别创建各集群映射目录
cd rabbitmq/
mkdir rabbitmq01 rabbitmq02 rabbitmq03
  1. 安装容器并运行
# rabbitmq01
docker run -d --hostname rabbitmq01 --name rabbitmq01 -v /mydata/rabbitmq/rabbitmq01:/var/lib/rabbitmq -p 15673:15672 -p 5673:5672 -e RABBITMQ_ERLANG_COOKIE='zr' rabbitmq:3.10.5-management

# rabbitmq02
docker run -d --hostname rabbitmq02 --name rabbitmq02 -v /mydata/rabbitmq/rabbitmq02:/var/lib/rabbitmq -p 15674:15672 -p 5674:5672 -e RABBITMQ_ERLANG_COOKIE='zr' --link rabbitmq01:rabbitmq01 rabbitmq:3.10.5-management

# rabbitmq03
docker run -d --hostname rabbitmq03 --name rabbitmq03 -v /mydata/rabbitmq/rabbitmq03:/var/lib/rabbitmq -p 15675:15672 -p 5675:5672 -e RABBITMQ_ERLANG_COOKIE='zr' --link rabbitmq01:rabbitmq01 --link rabbitmq02:rabbitmq02 rabbitmq:3.10.5-management

### 参数信息
-d 后台运行

--hostname 设置容器的主机名

--name 设置容器名

-v 设置容器数据卷

-p 本地端口与容器端口映射

--link 配置网络桥接

RABBITMQ_ERLANG_COOKIE 节点认证作用,部署集成时,需要同步该值

RABBITMQ_ERLANG_COOKIE 为rabbitmq多节点之间通信所用到的cookie,rabbitmq集群就是利用这一特性实现的

在本机测试访问，默认账号密码是guest，guest

http://192.168.159.100:15673/#/

http://192.168.159.100:15674/#/

http://192.168.159.100:15675/#/

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

  1. 设置 rabbitmq01 为主节点
# 1.进入正在运行的rabbitmq01容器
[root@vinjcent rabbitmq]# docker exec -it rabbitmq01 /bin/bash
# 2.停止容器中rabbitmq应用
root@rabbitmq01:/# rabbitmqctl stop_app
RABBITMQ_ERLANG_COOKIE env variable support is deprecated and will be REMOVED in a future version. Use the $HOME/.erlang.cookie file or the --erlang-cookie switch instead.
Stopping rabbit application on node rabbit@rabbitmq01 ...
# 3.清除节点上的历史数据(如果不清除,无法将节点加入到集群)
root@rabbitmq01:/# rabbitmqctl reset
RABBITMQ_ERLANG_COOKIE env variable support is deprecated and will be REMOVED in a future version. Use the $HOME/.erlang.cookie file or the --erlang-cookie switch instead.
Resetting node rabbit@rabbitmq01 ...
# 4.启动应用
root@rabbitmq01:/# rabbitmqctl start_app
RABBITMQ_ERLANG_COOKIE env variable support is deprecated and will be REMOVED in a future version. Use the $HOME/.erlang.cookie file or the --erlang-cookie switch instead.
Starting node rabbit@rabbitmq01 ...

### Ctrl + p + q 退出并运行(尽量避免个人的设置的快捷键与之冲突,从而失效)

在这里插入图片描述

  1. 将rabbitmq02加入rabbitmq01
# 1.进入正在运行的rabbitmq02容器
[root@vinjcent rabbitmq]# docker exec -it rabbitmq02 /bin/bash
# 2.停止容器中rabbitmq应用
root@rabbitmq02:/# rabbitmqctl stop_app
# 3.清除节点上的历史数据
root@rabbitmq02:/# rabbitmqctl reset
# 4.将rabbitmq02节点加入到rabbitmq01(主节点)集群当中
root@rabbitmq02:/# rabbitmqctl join_cluster --ram rabbit@rabbitmq01
# 5.启动应用
root@rabbitmq02:/# rabbitmqctl start_app

在这里插入图片描述

  1. 将rabbitmq03加入rabbitmq01
# 1.进入正在运行的rabbitmq03容器
[root@vinjcent rabbitmq]# docker exec -it rabbitmq03 /bin/bash
# 2.停止容器中rabbitmq应用
root@rabbitmq03:/# rabbitmqctl stop_app
RABBITMQ_ERLANG_COOKIE env variable support is deprecated and will be REMOVED in a future version. Use the $HOME/.erlang.cookie file or the --erlang-cookie switch instead.
Stopping rabbit application on node rabbit@rabbitmq03 ...
# 3.清除节点上的历史数据
root@rabbitmq03:/# rabbitmqctl reset
RABBITMQ_ERLANG_COOKIE env variable support is deprecated and will be REMOVED in a future version. Use the $HOME/.erlang.cookie file or the --erlang-cookie switch instead.
Resetting node rabbit@rabbitmq03 ...
# 4.将rabbitmq03节点加入到rabbitmq01(主节点)集群当中
root@rabbitmq03:/# rabbitmqctl join_cluster --ram rabbit@rabbitmq01
RABBITMQ_ERLANG_COOKIE env variable support is deprecated and will be REMOVED in a future version. Use the $HOME/.erlang.cookie file or the --erlang-cookie switch instead.
Clustering node rabbit@rabbitmq03 with rabbit@rabbitmq01

08:35:58.823 [warning] Feature flags: the previous instance of this node must have failed to write the `feature_flags` file at `/var/lib/rabbitmq/mnesia/rabbit@rabbitmq03-feature_flags`:

08:35:58.823 [warning] Feature flags:   - list of previously disabled feature flags now marked as such: [:maintenance_mode_status]

08:35:59.030 [warning] Feature flags: the previous instance of this node must have failed to write the `feature_flags` file at `/var/lib/rabbitmq/mnesia/rabbit@rabbitmq03-feature_flags`:

08:35:59.030 [warning] Feature flags:   - list of previously enabled feature flags now marked as such: [:maintenance_mode_status]

08:35:59.057 [error] Failed to create a tracked connection table for node :rabbit@rabbitmq03: {:node_not_running, :rabbit@rabbitmq03}

08:35:59.057 [error] Failed to create a per-vhost tracked connection table for node :rabbit@rabbitmq03: {:node_not_running, :rabbit@rabbitmq03}

08:35:59.057 [error] Failed to create a per-user tracked connection table for node :rabbit@rabbitmq03: {:node_not_running, :rabbit@rabbitmq03}
# 5.启动应用
root@rabbitmq03:/# rabbitmqctl start_app
RABBITMQ_ERLANG_COOKIE env variable support is deprecated and will be REMOVED in a future version. Use the $HOME/.erlang.cookie file or the --erlang-cookie switch instead.
Starting node rabbit@rabbitmq03 ...
  1. 在主节点查看web管理界面

在这里插入图片描述

添加用户

### 在rabbitmq01添加用户
[root@vinjcent rabbitmq]# docker exec -it rabbitmq01 /bin/bash
# 创建一个账号、密码为"admin"的用户
root@rabbitmq01:/# rabbitmqctl add_user admin admin
# 设置用户身份
root@rabbitmq01:/# rabbitmqctl set_user_tags admin administrator
# 设置所有权限
root@rabbitmq01:/# rabbitmqctl set_permissions -p / admin ".*" ".*" ".*"

在这里插入图片描述

测试数据同步

  1. 在主节点创建一个fanout类型交换机

在这里插入图片描述

查看从节点的交换机

在这里插入图片描述

  1. 在主节点创建一个队列

在这里插入图片描述

查看从节点的消息队列

在这里插入图片描述

  1. 在从节点中将交换机与队列进行绑定

在这里插入图片描述

查看主节点的消息队列绑定关系

在这里插入图片描述

小结

如果采用的是多机部署的方式，需读取其中一个节点的cookie，并复制到其它节点（节点之间通过cookie确定相互是否可通信）

cookie 存放位置：/var/lib/rabbitmq/.erlang.cookie

例如：主机名分别为 rabbitmq01、rabbitmq02、rabbitmq03

1、逐个启动节点

2、配置个节点的hosts文件（vim /etc/hosts）

ip1: rabbitmq01

ip2: rabbitmq02

ip3: rabbitmq03

其它的步骤跟单机模式类似

下一篇文章《高级 - 分布式事务》

Naijia_OvO
关注
专栏目录
RabbitMQ集群
Zhuge_Dan的博客
06-30 838
RabbitMQ集群1 IP规划2 软件包3 基础配置3.1 关闭SELinux3.2 关闭防火墙或开放需要的业务端口3.3 调整max_open_files3.4 重启检查SELinux、firewalld和open files3.5 安装配置OpenJDK1.84 集群搭建4.1 hostname解析4.2 安装erlang环境4.2.1 解压缩并编译安装erlang4.2.2 修改环境变量4.2.3 验证安装成功4.3 解压安装RabbitMQ4.3.1 解压安装4.3.2 修改环境变量4.3.3 创
linux查看rabbitmq进程,[Linux]RabbitMQ
weixin_39980575的博客
05-06 4049
1 问题环境: CentOS7.8.2003 (x86 / 64bit)版本: RabbitMQ 3.6.15 (Erlang 19.3)安装方式: 二进制源码压缩安装2 解决思路2.1 思路1 关闭进程，并重启step1 查询mq的进程ps -ef | grep rabbitmqstep2 杀掉mq进程ps -ef | grep rabbitmq | grep -v grep | awk '{p...
RabbitMQ-集群
weixin_43956692的博客
02-13 735
学习笔记
RabbitMQ普通集群搭建指南
最新发布
P.Dragon|geekery.cn
07-23 601
在开始之前，确保所有节点上都已安装RabbitMQ Server。为了允许节点间通信，需要确保所有节点上的.erlang.cookie文件内容相同。一些有用没用的历史命令！节点复制cookie到其他节点。文件以正确解析各节点的名称。这表明集群已经成功建立，并且。作为RAM节点加入了集群。同时，设置主机名和修改。
RabbitMQ：集群
上海一九四三
07-20 1118
单机版的RabbitMQ服务器集群模式，不仅要面临服务器因为各种原因导致崩溃无法使用的情况，其吞吐量也是有限的。购买昂贵的服务器来增强单机RabbitMQ服务的性能显得捉襟见肘时，搭建一个RabbitMQ集群才是解决实际问题的关键。 RabbitMQ集群允许消费者和生产者在RabbitMQ单个节点崩溃的情况下继续运行，它可以通过添加更多的节点来线性地扩展消息通信的吞吐量。当其中一个RabbitMQ故障时，客户端能够重新连接到集群中的任何其它节点并继续生产或者消费。 不过RabbitMQ集群不能保证消息的万无
RabbitMQ之集群管理
凉茶铺的博客
12-02 3442
介绍了RabbitMQ的集群管理
rabbitmq-server-3.8.14.zip
04-12
- **集群**：多个RabbitMQ节点组成集群，提供高可用性和负载均衡。 - **TLS/SSL 安全**：支持通过加密连接保护通信安全。 **7. 监控与日志** RabbitMQ 提供了监控工具和API，可以实时查看服务器状态、性能指标等。...
rabbitmq-server3.10.5
01-10
RabbitMQ服务器3.10.5是一款广泛使用的开源消息代理和队列服务器，它基于高级消息队列协议（AMQP）实现。这个版本的RabbitMQ提供了稳定且高效的中间件服务，允许分布式系统中的应用程序进行异步通信，确保数据可靠...
rabbitmq-server-3.8.9.zip
09-29
RabbitMQ 是一个开源的消息代理和队列服务器，它基于高级消息队列协议（AMQP）标准，广泛应用于分布式系统中的异步任务处理、解耦组件通信以及可靠的数据交换。在本安装包 "rabbitmq-server-3.8.9.zip" 中，包含的是...
rabbitmq-server-3.7.16.exe
07-17
RabbitMQ是实现了高级消息队列协议（AMQP）的开源消息代理软件（亦称面向消息的中间件）。RabbitMQ服务器是用Erlang语言编写的，而集群和故障转移是构建在开放电信平台框架上的。所有主要的编程语言均有与代理接口...
rabbitmq-server-3.8.9-1.el7.noarch.rpm
12-03
RabbitMQ是实现了高级消息队列协议（AMQP）的开源消息代理软件（亦称面向消息的中间件）。RabbitMQ服务器是用Erlang语言编写的，而集群和故障转移是构建在开放电信平台框架上的。所有主要的编程语言均有与代理接口...
RabbitMQ基本管理（上）
用心做事
10-28 1867
1.1.2  显示RabbitMQ进程     查看RabbitMQ进程信息，输入下面命令： ？>pgrep -fl rabbitmq 31151/bin/sh /etc/init.d/rabbitmq-server restart 31153 /bin/bash -c ulimit -S -c 0>/dev/null 2>&1 ; /usr/sbin/rabbitmq-server 31
rabbitmq集群部署
qq_19520877的博客
05-25 314
1.每台服务器安装rabbitmq （不会的可以百度 有一堆。） 1.1.配置hosts文件内容 集群之间的ip vi /etc/hosts 192.168.101.51 mq 192.168.101.52 wc 2.安装完后开始配置集群 每台集群一定要保证 .erlang.cookie 要一样 这个文件在/var/lib/rabbitmq 目录下 ```csharp cd /var/lib/rabbitmq ls -al cat .erlang.cookie 可以通过scp拷贝到每台服务器
RabbitMQ集群设置
Vstars的博客
07-22 240
如果英文还可以，请直接看RabbitMQ的官方文章即可： https://www.rabbitmq.com/clustering.html   环境： OS: CentOS6.4 JDK版本: 1.7.0_67 RabbitMQ版本:  3.5.1 Erlang版本：17.4   1. 同步erlang cookie 首先，选择一台安装了RabbitMQ的机器作为集群主机 ...
rabbitmq基础4——集群部署、基础功能测试
百慕卿君博客
12-21 3113
rabbitmq单机多节点集群部署、多机集群部署、集群基础功能测试
rabbitMq部署(二) 单机rabbitmq 整合为集群
GinChou的萌新博客
04-30 1225
因要求需要部署一套rabbitmq，以前没接触过，所以在网上找到了方法: 以下是提供思路的大佬的原文： 1.Centos7 离线安装RabbitMQ,并配置集群___擎正义之旗 https://blog.csdn.net/Alger_magic/article/details/82868267 2.Caused by: com.rabbitmq.client.ShutdownSignal...
RabbitMQ学习笔记：消息服务器进程详解
OceanSky的专栏
12-11 2474
查看后台rabbitmq服务进程 可以看到一共有五个进程，其中PID为155（/usr/lib64/erlang/erts-10.5.6/bin/epmd -daemon）的进程是Erlang虚拟机的一个守护进程，与RabbitMQ节点一起运行，运行时使用它来发现特定节点监听端口；其它四个节点属于父子节点的关系； 停止Erlang虚拟机和RabbitMQ应用服务 #停止erlang虚拟机和R...
rabbitmq 管理 及 常用命令
热门推荐
一个写了10年bug的程序员日常笔记。
09-06 4万+
安装成服务的就用这个来启动service rabbitmq-server restartRPM安装的，那就启动进程，启动控制台插件就可以了Rabbitmq服务器的主要通过rabbitmqctl和rabbimq-plugins两个工具来管理，以下是一些常用功能。1）. 服务器启动与关闭 启动: rabbitmq-server –detached 关闭:rabbitmqctl sto
RabbitMQ学习笔记
make_summer的博客
02-01 2307
MQ、RabbitMQ、SpringBoot集成RabbitMQ
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Naijia_OvO

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值