一、环境准备
系统要求: 64bit的CentOS7.X
Java 版本大于等于JDKl.8 。
如果需要从GitHub上下载源码和编译的话需要安装Maven3.2.x和Git。
关闭防火墙
#停止firewall
systemctl stop firewalld.service
#禁止firewall开机启动
systemctl disable firewalld.service
#查看防火墙命令:
systemctl status firewalld.service
二、下载和安装
1、基于4.4.0版本,下载地址:
http://rocketmq.apache.org/release_notes/release-notes-4.4.0/
本例子下载的是源码rocketmq-all-4.4.0-source-release.zip
2、下载好后上传到指定Linux目录下,解压后进行安装,如下执行如下所示命令:
unzip rocketmq-all-4.4.0-source-release.zip
cd rocketmq-all-4.4.0/
mvn -Prelease-all -DskipTests clean install -U
三、集群配置和使用
1、RocketMQ 中的角色
RocketMQ 中,四个角色就是Producer(发) 、Consumer(收) 、Broker(负责暂存/传输)和NameServer(协调管理)Topic是用来区分不同类型的消息,如果一个Topic 要发送和接收的数据量非常大, 需要能支持增加并行处理的机器来提高处理速度,这时候一个Topic 可以根据需求设置一个或多个Message Queue, Message Queue 类似分区或Partition 。Topic 有了多个Message Queue 后,消息可以并行地向各个Message Queue 发送,消费者也可以并行地从多个Message Queue 读取消息并消费。
2、启动RocketMQ 的顺序:
先启动NameServer ,再启动Broker ,这时候消息队列已经可以提供服务了,想发送消息就使用Producer 来发送,想接收消息就使用Consumer 来接收。很多应用程序既要发送,又要接收,可以启动多个Producer 和Consumer 来发送多种消息,同时接收多种消息。为了消除单点故障,增加可靠性或增大吞吐量,可以在多台机器上部署多个NameServer 和Broker ,为每个Broker 部署一个或多个Slave 。
3、多机集群配置和部署:
只用两台物理机,搭建出双主、双从、无单点故障的高可用RocketMQ 集群。假设这两台物理机的IP 分别是192.168.118.201和192.168.118.202。
3.1、启动
2个NameServer和4个Broker时先启动2个NameServer,再启动4个Broker:
3.2、配置Broker信息
配置两机器上的Broker配置信息,每台机器启动一个Master角色的Broker和一个Slave角色的Broker,并互为主备.
broker-a和broker-b-s在一台机器(也就是说broker-a的主节点与broker-b的从节点部署在一台服务器上)
192.168.118.201机器上:
Master Broker的配置文件(/usr/hadoop/rocketmq-all-4.4.0/distribution/target/apache-rocketmq/conf/2m-2s-sync/broker-a.properties)如下配置:
*namesrvAddr=192.168.118.201:9876;192.168.118.202:9876
brokerClusterName=DefaultCluster
brokerName=broker-a
brokerId=0
deleteWhen=04
fileReservedTime=48
brokerRole=SYNC_MASTER
flushDiskType=ASYNC_FLUSH
listenPort=10911
storePathRootDir=/home/rocketmq/store-a*
Master Broker的配置文件(/usr/hadoop/rocketmq-all-4.4.0/distribution/target/apache-rocketmq/conf/2m-2s-sync/broker-b-s.properties)如下配置:
*namesrvAddr=192.168.118.201:9876;192.168.118.202:9876
brokerClusterName=DefaultCluster
brokerName=broker-b
brokerId=1
deleteWhen=04
fileReservedTime=48
brokerRole=SLAVE
flushDiskType=ASYNC_FLUSH
listenPort=10911
storePathRootDir=/home/rocketmq/store-b*
broker-b和broker-a-s在一台机器(也就是说broker-b的主节点与broker-a的从节点部署在一台服务器上)
192.168.118.202机器上:
Master Broker的配置文件(/usr/hadoop/rocketmq-all-4.4.0/distribution/target/apache-rocketmq/conf/2m-2s-sync/broker-b.properties)如下配置:
namesrvAddr=192.168.118.201:9876;192.168.118.202:9876
brokerClusterName=DefaultCluster
brokerName=broker-b
brokerId=0
deleteWhen=04
fileReservedTime=48
brokerRole=SYNC_MASTER
flushDiskType=ASYNC_FLUSH
listenPort=10911
storePathRootDir=/home/rocketmq/store-b
Master Broker的配置文件(/usr/hadoop/rocketmq-all-4.4.0/distribution/target/apache-rocketmq/conf/2m-2s-sync/broker-a-s.properties)如下配置:
namesrvAddr=192.168.118.201:9876;192.168.118.202:9876
brokerClusterName=DefaultCluster
brokerName=broker-a
brokerId=1
deleteWhen=04
fileReservedTime=48
brokerRole=SLAVE
flushDiskType=ASYNC_FLUSH
listenPort=10911
storePathRootDir=/home/rocketmq/store-a
3.3、启动
两台机器上分别启动NameServer:
nohup sh ./bin/mqnamesrv &
192.168.118.201机器分别启动如下服务
nohup sh ./bin/mqbroker -c ./conf/2m-2s-sync/broker-a.properties &
nohup sh ./bin/mqbroker -c ./conf/2m-2s-sync/broker-b-s.properties &
192.168.118.202机器分别启动如下服务
nohup sh ./bin/mqbroker -c ./conf/2m-2s-sync/broker-b.properties &
nohup sh ./bin/mqbroker -c ./conf/2m-2s-sync/broker-a-s.properties &
3.4、停止服务
sh ./bin/mqshutdown broker
sh ./bin/mqshutdown namesrv
四、可视化管理控制台-rocketmq-console
1、下载
https://github.com/apache/rocketmq-externals/archive/master.zip
2、配置和编译、运行
找到rocketmq-console,修改rocketmq-console\src\main\resources\的application.properties文件,将项目使用的rocketmq.config.namesrvAddr配置好
本例子中如下配置:
rocketmq.config.namesrvAddr=192.168.118.201:9876;192.168.118.202:9876
编译:
进入到rocketmq-console目录,执行如下命令进行编译
mvn clean package -Dmaven.test.skip=true
把编译的rocketmq-console-ng-1.0.0.jar发到192.168.118.201服务器上,执行:
java -jar rocketmq-console-ng-1.0.0.jar
3、预览
浏览器上输入http://192.168.118.201:8080,即可看到管理控制台