centos下RocketMQ的双master集群环境搭建（一）

最新推荐文章于 2024-04-25 10:00:00 发布
最新推荐文章于 2024-04-25 10:00:00 发布
阅读量256 收藏 1
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ssaiwey/article/details/104417917
版权

本人使用的环境是CentOS-6.4-x86_64-bin-DVD1.rar,alibaba-rocketmq-3.2.6.tar.gz,jdk-7u67-linux-x64.tar.gz,apache-tomcat-7.0.29.tar.gz。两台虚拟机ip地址：192.168.1.121，192.168.1.122。同时关闭两台虚拟机的防火墙：chkconfig iptables off(永久关闭防火墙)   该网址也有官方http://rocketmq.apache.org/docs/transaction-example/

第一步：在192.168.1.121和192.168.1.122主机上，修改主机文件 vim /etc/hosts 添加如下信息【两台机器】
              192.168.1.121 rocketmq-nameserver1
              192.168.1.121 rocketmq-master1
              192.168.1.122 rocketmq-nameserver2
              192.168.1.122 rocketmq-master2

第二部：重启一下两台主机网卡【两台机器】
              service network restart     

第三步：拷贝alibaba-rocketmq-3.2.6.tar.gz安装包到/usr/local/software下【两台机器】
              解压tar -zxvf alibaba-rocketmq-3.2.6.tar.gz -C /usr/local/    
             创建软链接 ln -s alibaba-rocketmq rocketmq 

第四步：创建存储路径【两台机器】
              mkdir /usr/local/rocketmq/store
              mkdir /usr/local/rocketmq/store/commitlog
              mkdir /usr/local/rocketmq/store/consumequeue
              mkdir /usr/local/rocketmq/store/index 

第五步：修改配置文件在两台机器上同时修改
        vim /usr/local/rocketmq/conf/2m-noslave/broker-a.properties
        

#所属集群名字
brokerClusterName=rocketmq-cluster
#broker名字，注意此处不同的配置文件填写的不一样
brokerName=broker-a
#0 表示 Master，>0 表示 Slave
brokerId=0
#nameServer地址，分号分割
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876
#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=10911
#删除文件时间点，默认凌晨 4点
deleteWhen=04
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/usr/local/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/usr/local/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/usr/local/rocketmq/store/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole=ASYNC_MASTER
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

      vim /usr/local/rocketmq/conf/2m-noslave/broker-b.properties

#所属集群名字
brokerClusterName=rocketmq-cluster
#broker名字，注意此处不同的配置文件填写的不一样
brokerName=broker-b
#0 表示 Master，>0 表示 Slave
brokerId=0
#nameServer地址，分号分割
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876
#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=10911
#删除文件时间点，默认凌晨 4点
deleteWhen=04
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/usr/local/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/usr/local/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/usr/local/rocketmq/store/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole=ASYNC_MASTER
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

第六步：修改日志配置文件【两台机器】
        mkdir -p /usr/local/rocketmq/logs
        //就是将/usr/local/rocketmq/conf下所有的*xml文件里"${user.home}"替换为"/usr/local/rocketmq"
        cd /usr/local/rocketmq/conf && sed -i 's#${user.home}#/usr/local/rocketmq#g'*.xml

第七步 修改启动脚本参数【两台机器】
        vim /usr/local/rocketmq/bin/runbroker.sh
             JAVA_OPT="${JAVA_OPT} -server -Xms2g -Xmx2g -Xmn1g -XX:PermSize=128m -XX:MaxPermSize=320m"
        vim /usr/local/rocketmq/bin/runserver.sh
             JAVA_OPT="${JAVA_OPT} -server -Xms2g -Xmx2g -Xmn1g -XX:PermSize=128m -XX:MaxPermSize=320m"

第八步：启动NameServer【两台机器】
        cd /usr/local/rocketmq/bin
        nohup sh mqnamesrv &

第九步：启动BrokerServer A【192.168.1.121】        
        cd /usr/local/rocketmq/bin
         nohup sh mqbroker -c /usr/local/rocketmq/conf/2m-noslave/broker-a.properties >/dev/null 2>&1 & # netstat -ntlp
         jps
         tail -f -n 500 /usr/local/rocketmq/logs/rocketmqlogs/broker.log
         tail -f -n 500 /usr/local/rocketmq/logs/rocketmqlogs/namesrv.log
第九步：启动BrokerServer B【192.168.1.122】        
        cd /usr/local/rocketmq/bin
         nohup sh mqbroker -c /usr/local/rocketmq/conf/2m-noslave/broker-b.properties >/dev/null 2>&1 & # netstat -ntlp
         jps
         tail -f -n 500 /usr/local/rocketmq/logs/rocketmqlogs/broker.log
         tail -f -n 500 /usr/local/rocketmq/logs/rocketmqlogs/namesrv.log

第十步：完成以上九步说明你已经服务搭建成功了，下面就需要搭建控制台查看和通过代码进行测试环境。通过生产端和消费端进行测是，这一将我们将在下一篇博客。

退役未退休的码农
关注
linux环境下rocketMq双master集群搭建
congge
06-07 2167
为什么要使用集群 在生产环境中，经常会有意外的情况发生，对于rocketmq也不例外，单节点情况下，如果出现网络闪断，服务器掉电或宕机之类的，如果服务器不能及时恢复，很可能造成丢消息的情况，因此，集群环境下可以保证服务的高可靠用性。 rocketMq集群模式 RocketMQ的集群部署方式有多种，其中包括单个Master、多个Master、多Master多Slave模式（异步复制）以及多Maste...
docker-compose 搭建RocketMQ 5.1.0 集群（双主双从模式） | Spring Cloud 28
热门推荐
gmHappy
03-22 1万+
网上关于`Docker`搭建`RocketMQ`单机&集群的版本一般都是`4.X`。关于最新的`5.X`版本，官方给出的示例都是基于物理机&虚拟机实现，不便于我们我们日常开发使用，而且官方镜像 https://hub.docker.com/r/apache/rocketmq 中也没有关于容器化使用的介绍。 本章的目的：展示基于`docker-compose` 搭建`RocketMQ 5.1.0`集群，及一些部署在部署过程中的注意事项，方便大家对新版本的尝鲜与使用。
rocketmq集群部署
08-11
centos7系统搭建rocketmq集群手册
Centos7搭建RocketMq集群
爆裂无球的程序空间
12-01 931
Centos7搭建RocketMq集群 每天多学一点点~ 话不多说，这就开始吧… 文章目录Centos7搭建RocketMq集群1.前言1.环境要求2. 下载3. 安装Rocketmq4. 启动Rocketmq5. 搭建Rocketmq集群6.结语 1.前言 年底了，虽然忙，但还是要抽时间学习点东西~ 士不可以不弘毅，任重而道远，加油~ 之前学习了rabbitmq，但是rabbit有性能瓶颈，为了...
centos下RocketMQ集群（两主两从）环境搭建
ssaiwey的博客
02-24 488
本人使用的环境是CentOS-6.4-x86_64-bin-DVD1.rar,alibaba-rocketmq-3.2.6.tar.gz,jdk-7u67-linux-x64.tar.gz,apache-tomcat-7.0.29.tar.gz。两台主节点ip：192.168.1.125，192.168.1.126。两台从节点ip:192.168.1.123，192.168.1.124，同时关闭四...
CentOS 部署rocketmq集群
weixin_46106069的博客
03-09 601
rocketmq是一个队列模型的消息中间件，具有高性能、高可靠、高实时、分布式特点。能够保证严格的消息顺序，提供丰富的消息拉取模式，高效的订阅者水平扩展能力，实时的消息订阅机制。
RocketMQ双Master+双Slave集群环境搭建
江上飞鱼
09-13 1839
准备四台机子： 主机1 192.168.2.3 主机2 192.168.2.4 从机1 192.168.2.5 从机2 192.168.2.6 1、关闭四台机子的防火墙： service iptables stop2、修改四台机子的主机文件： vi /ect/hosts 192.168.2.3 rocke
CentOS上搭建RocketMQ多Master高可用集群指南
RocketMQ是一款高效、可扩展的分布式消息中间件，本文主要介绍在CentOS系统上部署RocketMQ，关注的是多Master模式的安装配置，以及其与单Master、多Master多Slave模式的区别。 首先，我们来探讨多Master模式的安装...
CentOS7配置RocketMQ集群
最新发布
pleaseprintf的博客
04-25 809
前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。点击跳转到网站，这篇文章男女通用，看懂了就去分享给你的码吧。RocketMQ是阿里巴巴开源的分布式消息中间件。支持事务消息、顺序消息、批量消息、定时消息、消息回溯等。它里面有几个区别于标准消息中件间的概念，如Group、Topic、Queue等。系统组成则由Producer、Consumer、Broker、NameServer等。官方网站集群模式：1）单Master模式。
搭建RocketMQ服务-多Master模式
王金铎的博客
03-08 2197
前言 RocketMQ 集群部署模式 单 master 模式 也就是只有一个 master 节点，如果master节点挂掉了，会导致整个服务不可用，线上不宜使用，适合个人学习使用。 多 master 模式 多个 master 节点组成集群，单个 master 节点宕机或者重启对应用没有影响。 优点：所有模式中性能最高 缺点：单个 master 节点宕机期间，未被消费的消息在节点恢...
Centos6下RocketMQ高可用集群部署记录（个人精华版）
08-29
本篇文章详细记录了Centos6下RocketMQ高可用集群部署的完整过程，讲解到位，本人线上实操手册！在此分享，希望能帮助到有用到的朋友。
RocketMQ筑基篇-部署集群（Centos7）
qq_26462567的博客
12-27 800
环境 服务器 服务器IP 192.68.1.61 192.68.1.232 192.68.1.233 其他环境 环境 版本 JDK java8 RocketMq 4.8.0 RocketMq需要java8的java环境，如果是java11会报错，主要rocketMq是支持java11的，只是脚本不知道，网上也有解决方案，自行百度即可。 下载RocketMQ 官网下载地址 ttp://rocketmq.apache.org/dowloading/rel
搭建RocketMQ服务-多Master多Slave模式
王金铎的博客
03-08 1894
前言 RocketMQ 集群部署模式 单 master 模式 也就是只有一个 master 节点，如果master节点挂掉了，会导致整个服务不可用，线上不宜使用，适合个人学习使用。 多 master 模式 多个 master 节点组成集群，单个 master 节点宕机或者重启对应用没有影响。 优点：所有模式中性能最高 缺点：单个 master 节点宕机期间，未被消费的消息在节点恢...
RocketMQ双Master模式搭建
骑猪喝咖啡
01-22 650
服务器环境 192.168.1.106 hadoop master 192.168.1.107 hadoop master 上传解压 tar zxvf apache-rocketmq.tar.gz -C /home/hadoop mv apache-rocketmq apache-rocketmq-4.2.0 ln -s ./apache-rocketmq-4.2.0 rocket
RocketMQ环境搭建(双master双slave模式)
weixin_30687587的博客
12-26 133
1.环境准备: 准备四台主机(我这里用CentOSx64) 主机 角色 broker 192.168.192.130 Master1 BrokerServerA 192.168.192.131 Master2 BrokerServerB 192.168.192.129 Master1-slave BrokerServerA-S ...
Centos7下如何进行RocketMQ双Master搭建
路漫漫，水迢迢
08-11 2929
使用背景RocketMQ是一款分布式、队列模型的消息中间件，具有以下特点 1、能够保证严格的消息顺序 2、提供丰富的消息拉取模式 3、高效的订阅者水平扩展能力 4、实时的消息订阅机制 5、亿级消息堆积能力 为什么使用RocketMQ 1、强调集群无单点，可扩展，任意一点高可用、水平可扩展 2、海量消息堆积能力，消息堆积后写入低延迟 3、支持上万个队列 4、消息失败重试机制 5、
【MQ】Centos7搭建双主双从RocketMQ集群
哈士奇
05-30 5475
一、前言      在前一篇博客中，小编向大家介绍了如何在Centos7中安装RocketMQ。通过这种方法我们可以搭建出来一台母机，通过这台母机来进行克隆搭建出我们的集群。二、搭建环境 Centos7 Jdk1.8 Rocketmq 3.2.6 需要根据《Centos7安装RocketMQ》搭建一台母机 三、为什么要搭建集群？      服务器集群就是指将很多服务器集中起来一起进行同一种服务，在客
Centos7.5 Rocketmq集群安装
weixin_43840640的博客
03-14 752
安装Rocketmq主服务器 1.安装支持解压ZIP的工具 yum install -y unzip zip 2.解压rocketmq [root@app01 software]# unzip rocketmq-all-4.4.0-bin-release.zip [root@app01 software]# mv rocketmq-all-4.4.0-bin-release /opt/ 3....
CentOS7.4上搭建rocketMQ集群
柠乐
12-19 355
一、rocketMQ集群部署方案优缺点对比： 多Master模式（2m-noslave） ： 一个集群无Slave，全是Master，例如2个Master或者3个Master 优点：配置简单，单个Master宕机或重启维护对应用无影响，在磁盘配置为RAID10时，即使机器宕机不可恢复情况下，由于RAID10磁盘非常可靠，消息也不会丢（异步刷盘丢失少量消息，同步刷盘一条不丢）。性能最高。 缺...
CentOS下Zookeeper单机与集群环境搭建教程
"Zookeeper开发环境搭建教程，包括在CentOS上搭建Zookeeper的单机环境和集群环境，以及相关的配置步骤和注意事项。" 在IT领域，Zookeeper是一款广泛使用的分布式协调服务，由Apache Hadoop项目开发，它提供了一种...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值