centos下RocketMQ集群（两主两从）环境搭建

最新推荐文章于 2024-06-20 15:07:42 发布
最新推荐文章于 2024-06-20 15:07:42 发布
阅读量482 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ssaiwey/article/details/104472770
版权

本人使用的环境是CentOS-6.4-x86_64-bin-DVD1.rar,alibaba-rocketmq-3.2.6.tar.gz,jdk-7u67-linux-x64.tar.gz,apache-tomcat-7.0.29.tar.gz。两台主节点ip：192.168.1.125，192.168.1.126。两台从节点ip:192.168.1.123，192.168.1.124，同时关闭四台虚拟机的防火墙：chkconfig iptables off(永久关闭防火墙)

第一步：修改主机文件 vim /etc/hosts 添加如下信息【四台机器】
            192.168.1.125 rocketmq-nameserver1
            192.168.1.125 rocketmq-master1
            192.168.1.126 rocketmq-nameserver2
            192.168.1.126 rocketmq-master2
            192.168.1.123 rocketmq-nameserver3
            192.168.1.123 rocketmq-master3
            192.168.1.124 rocketmq-nameserver4
            192.168.1.124 rocketmq-master4

第二部：重启一下四台主机网卡【四台机器】（不行就重启计算机）
              service network restart   

第三步：拷贝alibaba-rocketmq-3.2.6.tar.gz安装包到/usr/local/software下【四台机器】
                解压tar -zxvf alibaba-rocketmq-3.2.6.tar.gz -C /usr/local/    
                创建软链接 ln -s alibaba-rocketmq rocketmq 

第四步：创建存储路径【四台机器】
              mkdir /usr/local/rocketmq/store
              mkdir /usr/local/rocketmq/store/commitlog
              mkdir /usr/local/rocketmq/store/consumequeue
              mkdir /usr/local/rocketmq/store/index 

第五步：修改配置文件在四台机器上同时修改【四台机器】
                  vim /usr/local/rocketmq/conf/2m-2s-async/broker-a.properties

#所属集群名字
brokerClusterName=rocketmq-cluster
#broker名字，注意此处不同的配置文件填写的不一样
brokerName=broker-a
#0 表示 Master，>0 表示 Slave
brokerId=0
#nameServer地址，分号分割
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876;rocketmq-nameserver3:9876;rocketmq-nameserver4:9876
#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=10911
#删除文件时间点，默认凌晨 4点
deleteWhen=04
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/usr/local/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/usr/local/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/usr/local/rocketmq/store/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole=ASYNC_MASTER
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

        vim /usr/local/rocketmq/conf/2m-2s-async/broker-a-s.properties

#所属集群名字
brokerClusterName=rocketmq-cluster
#broker名字，注意此处不同的配置文件填写的不一样
brokerName=broker-a
#0 表示 Master，>0 表示 Slave
brokerId=1
#nameServer地址，分号分割
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876;rocketmq-nameserver3:9876;rocketmq-nameserver4:9876
#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=10911
#删除文件时间点，默认凌晨 4点
deleteWhen=04
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/usr/local/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/usr/local/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/usr/local/rocketmq/store/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole=SLAVE
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

        vim /usr/local/rocketmq/conf/2m-2s-async/broker-b.properties

#所属集群名字
brokerClusterName=rocketmq-cluster
#broker名字，注意此处不同的配置文件填写的不一样
brokerName=broker-b
#0 表示 Master，>0 表示 Slave
brokerId=0
#nameServer地址，分号分割
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876;rocketmq-nameserver3:9876;rocketmq-nameserver4:9876
#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=10911
#删除文件时间点，默认凌晨 4点
deleteWhen=04
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/usr/local/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/usr/local/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/usr/local/rocketmq/store/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole=ASYNC_MASTER
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

          vim /usr/local/rocketmq/conf/2m-2s-async/broker-b-s.properties

#所属集群名字
brokerClusterName=rocketmq-cluster
#broker名字，注意此处不同的配置文件填写的不一样
brokerName=broker-b
#0 表示 Master，>0 表示 Slave
brokerId=1
#nameServer地址，分号分割
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876;rocketmq-nameserver3:9876;rocketmq-nameserver4:9876
#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=10911
#删除文件时间点，默认凌晨 4点
deleteWhen=04
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/usr/local/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/usr/local/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/usr/local/rocketmq/store/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole=SLAVE
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

第六步：修改日志配置文件【四台机器】
        mkdir -p /usr/local/rocketmq/logs
        //就是将/usr/local/rocketmq/conf下所有的*xml文件里"${user.home}"替换为"/usr/local/rocketmq"
        cd /usr/local/rocketmq/conf && sed -i 's#${user.home}#/usr/local/rocketmq#g'*.xml（注意：如果执行报错，那就手动替换）

第七步 修改启动脚本参数【四台机器】
                vim /usr/local/rocketmq/bin/runbroker.sh
                      JAVA_OPT="${JAVA_OPT} -server -Xms1g -Xmx1g -Xmn512M -XX:PermSize=128m -XX:MaxPermSize=320m"
                vim /usr/local/rocketmq/bin/runserver.sh
                      JAVA_OPT="${JAVA_OPT} -server -Xms1g -Xmx1g -Xmn512M -XX:PermSize=128m -XX:MaxPermSize=320m"

 第八步：启动NameServer【四台机器】
                   cd /usr/local/rocketmq/bin
                   nohup sh mqnamesrv &

 第九步：1.启动【192.168.1.125】      
                     cd /usr/local/rocketmq/bin
                     nohup sh mqbroker -c /usr/local/rocketmq/conf/2m-2s-async/broker-a.properties >/dev/null 2>&1 & # netstat -ntlp
               2.启动【192.168.1.126】        
                     cd /usr/local/rocketmq/bin
                     nohup sh mqbroker -c /usr/local/rocketmq/conf/2m-2s-async/broker-b.properties >/dev/null 2>&1 & # netstat -ntlp
               2.启动【192.168.1.123】        
                     cd /usr/local/rocketmq/bin
                     nohup sh mqbroker -c /usr/local/rocketmq/conf/2m-2s-async/broker-a-s.properties >/dev/null 2>&1 & # netstat -ntlp
               2.启动【192.168.1.124】        
                     cd /usr/local/rocketmq/bin
                     nohup sh mqbroker -c /usr/local/rocketmq/conf/2m-2s-async/broker-b-s.properties >/dev/null 2>&1 & # netstat -ntlp

第十步：查看jps【四台机器】

第十一步：查看控制台应用（控制台应用程序在上一篇博客已经写了如何搭建）

 看到这应该算是架构搭建成功了

退役未退休的码农
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
rocketmq集群部署
08-11
centos7系统搭建rocketmq集群手册
Centos7搭建RocketMq集群
爆裂无球的程序空间
12-01 911
Centos7搭建RocketMq集群 每天多学一点点~ 话不多说，这就开始吧… 文章目录Centos7搭建RocketMq集群1.前言1.环境要求2. 下载3. 安装Rocketmq4. 启动Rocketmq5. 搭建Rocketmq集群6.结语 1.前言 年底了，虽然忙，但还是要抽时间学习点东西~ 士不可以不弘毅，任重而道远，加油~ 之前学习了rabbitmq，但是rabbit有性能瓶颈，为了...
RocketMQ集群搭建
最新发布
郭靖宇的个人博客
06-20 663
下载地址：https://github.com/apache/rocketmq-externals。下载地址：https://rocketmq.apache.org/download/服务器：node1（192.168.200.121）服务器：node2（192.168.200.122）服务器：node2（192.168.200.122）服务器：node3（192.168.200.123）上启动master1-slave1和master2。上启动master2-slave1。使用unzip解压命令。
centos下RocketMQ的双master集群环境搭建（一）
ssaiwey的博客
02-23 242
第一步：在192.168.1.121和192.168.1.122主机上，修改主机文件 vim /etc/hosts 添加如下信息 192.168.1.121 rocketmq-nameserver1 192.168.1.121 rocketmq-master1 192.168.1.122 rocketmq-name...
CentOS 部署rocketmq集群
weixin_46106069的博客
03-09 561
rocketmq是一个队列模型的消息中间件，具有高性能、高可靠、高实时、分布式特点。能够保证严格的消息顺序，提供丰富的消息拉取模式，高效的订阅者水平扩展能力，实时的消息订阅机制。
RocketMQ两主两从搭建
lvxiucai的博客
01-21 562
一.准备工作 1.编辑hosts文件（两个节点服务器都要改，） vim /etc/hosts 添加以下信息： #namesrv cluster 47.111.67.27 mq-nameserver1 47.111.141.21 mq-nameserver2 #broker 47.111.67.27 mq-master1 47.111.67.27 mq-slave2 47.111....
CentOS7部署RocketMQ集群相关安装包
02-22
CentOS7部署RocketMQ集群相关安装包
CentOS下RabbitMq高可用集群环境搭建教程
01-11
CentOS下RabbitMq高可用集群环境搭建教程分享给大家。 准备工作 1、准备两台或多台安装有rabbitmq-server服务的服务器 我这里准备了两台，分别如下： 192.168.40.130 rabbitmq01 192.168.40.131 rabbitmq02 2、确保...
详解centos下搭建redis集群
01-10
首先，集群数需要基数，这里搭建一个简单的redis集群（6个redis实例进行集群）。 在一台服务器上操作，因此仅需要6个不同的端口号即可。分别是：7001、7002、7003、7004、7005、7006。 步骤： 1、上传redis-3.0.0....
高可用 RocketMQ 集群搭建.doc
08-24
在搭建高可用 RocketMQ 集群之前，需要安装相关环境，包括操作系统、Java 环境和 RocketMQ 软件。 1. 操作系统：使用 CentOS 7 作为操作系统。 2. Java 环境：使用 jdk1.8 作为 Java 环境。 3. RocketMQ 软件：...
rocketMQ（二 ）Centos7 集群
weixin_30675967的博客
04-15 366
rocketMQ集群： 在运用中流程一般 是在程序中使用代码编辑生产者,将所需要的消息发送到rocketmq中，然后另一个程序编辑消费者从rocketmq里面获取消息。rocketmq集群 需要对nameServer 和Broker 集群 准备两台服务器，两台机器都是master，如果要搞一主N备，修改相应的配置文件 ip:192.168.31.144 rocketmq-nameserver...
Centos6下RocketMQ高可用集群部署记录（个人精华版）
08-29
本篇文章详细记录了Centos6下RocketMQ高可用集群部署的完整过程，讲解到位，本人线上实操手册！在此分享，希望能帮助到有用到的朋友。
两台服务器集群巧搭建
11-11
两台服务器集群巧搭建
redis3主3从集群搭建完整版
11-23
redis 3主3从 集群搭建完整版，各种错误解决，一站式方便快捷，只需要一个文档就够了。redis 3主3从 集群搭建完整版
RocketMQ筑基篇-部署集群（Centos7）
qq_26462567的博客
12-27 787
环境 服务器 服务器IP 192.68.1.61 192.68.1.232 192.68.1.233 其他环境 环境 版本 JDK java8 RocketMq 4.8.0 RocketMq需要java8的java环境，如果是java11会报错，主要rocketMq是支持java11的，只是脚本不知道，网上也有解决方案，自行百度即可。 下载RocketMQ 官网下载地址 ttp://rocketmq.apache.org/dowloading/rel
Centos7.5 Rocketmq集群安装
weixin_43840640的博客
03-14 742
安装Rocketmq主服务器 1.安装支持解压ZIP的工具 yum install -y unzip zip 2.解压rocketmq [root@app01 software]# unzip rocketmq-all-4.4.0-bin-release.zip [root@app01 software]# mv rocketmq-all-4.4.0-bin-release /opt/ 3....
CentOS7部署RocketMQ集群
Hello World
02-22 1533
CentOS7部署一个2主2从的异步刷盘RocketMQ集群
Centos7 部署 RocketMQ 高可用集群
专注基础架构领域
12-02 1615
Centos7 部署 RocketMQ 高可用集群。将原来的配置内容全部注释掉（之后的properties配置文件都得这样）发送成功后我们可以到控制台查看消息和消费情况等信息。10.0.61.12上操作。10.0.61.21上操作。10.0.61.21上操作。10.0.61.22上操作。10.0.61.22上操作。10.0.61.21上操作。10.0.61.21上操作。
2 centos集群搭建
chichuo1681的博客
07-02 105
上一篇 《1-缓存架构意义》讲解了为啥需要缓存架构、对比其他方式、意义。 现在我们从环境搭建开始一步步从各个知识点去讲解缓存架构方案的落地，本章节主要讲解centos 集群搭建及ssh相互免密登录 环境配置：(4 node) VirtualBox 5.0.24.8355 CentOS-6....
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值