RocketMQ 安装、集群搭建及常见问题

1 单机安装

1.1 安装步骤

以二进制包方式安装

1. 解压安装包

2. 进入安装目录

1.2 目录介绍

• bin：启动脚本，包括shell脚本和CMD脚本

• conf：实例配置文件 ，包括broker配置文件、logback配置文件等

• lib：依赖jar包，包括Netty、commons-lang、FastJSON等

1.3 启动RocketMQ

1. 启动NameServer

     # 1.启动NameServer
     nohup sh bin/mqnamesrv &
     # 2.查看启动日志
     tail -f ~/logs/rocketmqlogs/namesrv.log
   

2. 启动Broker

   # 1.启动Broker
   nohup sh bin/mqbroker -n localhost:9876 &
   # 2.查看启动日志
   tail -f ~/logs/rocketmqlogs/broker.log 
   

2 双主双从集群搭建

2.1 总体架构

消息高可用采用2m-2s（同步双写）方式

2.2 集群工作流程

1. 启动NameServer，NameServer起来后监听端口，等待Broker、Producer、Consumer连上来，相当于一个路由控制中心。

2. Broker启动，跟所有的NameServer保持长连接，定时发送心跳包。心跳包中包含当前Broker信息(IP+端口等)以及存储所有Topic信息。注册成功后，NameServer集群中就有Topic跟Broker的映射关系。

3. 收发消息前，先创建Topic，创建Topic时需要指定该Topic要存储在哪些Broker上，也可以在发送消息时自动创建Topic。

4. Producer发送消息，启动时先跟NameServer集群中的其中一台建立长连接，并从NameServer中获取当前发送的Topic存在哪些Broker上，轮询从队列列表中选择一个队列，然后与队列所在的Broker建立长连接从而向Broker发消息。

5. Consumer跟Producer类似，跟其中一台NameServer建立长连接，获取当前订阅Topic存在哪些Broker上，然后直接跟Broker建立连接通道，开始消费消息。

2.3 服务器环境

序号	IP	角色	架构模式
1	192.168.25.135	nameserver、brokerserver	Master1、Slave2
2	192.168.25.138	nameserver、brokerserver	Master2、Slave1

2.4 Host添加信息

也可以不用配置这一步，不配置的话，把后续配置文件中的rocketmq-nameserver1 等替换为具体 ip 即可。

vim /etc/hosts

配置如下:

# nameserver
192.168.25.135 rocketmq-nameserver1
192.168.25.138 rocketmq-nameserver2
# broker
192.168.25.135 rocketmq-master1
192.168.25.135 rocketmq-slave2
192.168.25.138 rocketmq-master2
192.168.25.138 rocketmq-slave1

配置完成后, 重启网卡

systemctl restart network

2.5 防火墙配置

宿主机需要远程访问虚拟机的rocketmq服务和web服务，需要开放相关的端口号，简单粗暴的方式是直接关闭防火墙

# 关闭防火墙
systemctl stop firewalld.service 
# 查看防火墙的状态
firewall-cmd --state 
# 禁止firewall开机启动
systemctl disable firewalld.service

或者为了安全，只开放特定的端口号，RocketMQ默认使用3个端口：9876 、10911 、11011 。如果防火墙没有关闭的话，那么防火墙就必须开放这些端口：

• nameserver 默认使用 9876 端口

• master 默认使用 10911 端口

• slave 默认使用11011 端口

执行以下命令：

# 开放name server默认端口
firewall-cmd --remove-port=9876/tcp --permanent
# 开放master默认端口
firewall-cmd --remove-port=10911/tcp --permanent
# 开放slave默认端口 (当前集群模式可不开启)
firewall-cmd --remove-port=11011/tcp --permanent 
# 重启防火墙
firewall-cmd --reload