RocketMQ 单Master搭建

最新推荐文章于 2024-06-29 16:24:55 发布
最新推荐文章于 2024-06-29 16:24:55 发布
阅读量335 收藏
点赞数
分类专栏： MQ 文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/eddielee9217/article/details/118407964
版权
本文档详细介绍了如何在RedHat/CentOS7环境下，通过Docker部署一个RocketMQ的单Master实例。步骤包括：环境准备（JDK1.8+，RocketMQ4.3.0），修改hosts，上传与解压RocketMQ，创建存储路径，配置单点RocketMQ，测试，修改日志配置文件，启动NameServer和BrokerServer，并提供了遇到问题时的日志查看方法。
摘要由CSDN通过智能技术生成

文章目录

目录

参考地址：

RocketMQ环境准备

  • RedHat & CentOS7
  • JDK1.8+
  • RocketMQ 4.3.0

搭建单Master

序号Ip用户名密码角色模式
1192.168.8.246root****nameServer1,brokerServer1Master1

修改hosts

vim /etc/hosts

192.168.8.246 rocketmq-master1
192.168.8.246 rocketmq-nameserver1

上传与解压

00:29:25

mkdir -p /opt/software && cd /opt/software/
rz -be   # 上传
unzip /opt/software/rocketmq-all-4.3.0-bin-release.zip && mv rocketmq-all-4.3.0-bin-release /usr/local/apache-rocketmq
ln -s /usr/local/apache-rocketmq /usr/local/rocketmq   # 建立软连接

创建存储路径

# 数据存储位置
mkdir /usr/local/rocketmq/store

# 真正存储rocketmq的数据，生产者就是发到这里
mkdir /usr/local/rocketmq/store/commitlog

# 类似数据库索引
mkdir /usr/local/rocketmq/store/consumequeue

# 快速查询rocketmq消息
mkdir /usr/local/rocketmq/store/index

单点的RocketMQ配置文件

良好习惯，备份

cp /usr/local/rocketmq/conf/2m-2s-async/broker-a.properties /usr/local/rocketmq/conf/2m-2s-async/broker-a.properties.bak

清空文件，然后黏贴下面配置进去 00:35:00

vim /usr/local/rocketmq/conf/2m-2s-async/broker-a.properties

#所属集群名字
brokerClusterName=rocketmq-cluster
#broker 名字，注意此处不同的配置文件填写的不一样
brokerName=broker-a
#0 表示 Master，>0 表示 Slave
brokerId=0
#nameServer 地址，分号分割
#namesrvAddr=rocketmq-nameserver1:9876
namesrvAddr=192.168.8.246:9876
#在发送消息时，自动创建服务器不存在的 topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建 Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=10911
#删除文件时间点，默认凌晨 4 点
deleteWhen=04
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog 每个文件的大小默认 1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue 每个文件默认存 30W 条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/usr/local/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/usr/local/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/usr/local/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/usr/local/rocketmq/store/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制 Master
#- SYNC_MASTER 同步双写 Master
#- SLAVE
brokerRole=ASYNC_MASTER
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

# 多网卡情况下必需指定，不然有可能选择其他网卡导致连接失败
brokerIP1=192.168.8.246

nameServer地址对应hosts的, 或者填写内网IP，那就可以无视hosts配置

End 00:37:03

测试

[eddie@tracker bin]# sh mqadmin clusterList -n localhost:9876 
Java HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=128m; support was removed in 8.0
Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=128m; support was removed in 8.0
#Cluster Name     #Broker Name            #BID  #Addr                  #Version                #InTPS(LOAD)       #OutTPS(LOAD) #PCWait(ms) #Hour #SPACE
rocketmq-cluster  broker-a                0     192.168.8.246:10911    V4_3_0                   0.00(0,0ms)         0.00(0,0ms)          0 451451.84 0.5355

修改日志配置文件

mkdir -p /usr/local/rocketmq/logs
cd /usr/local/rocketmq/conf && sed -i 's#${user.home}#/usr/local/rocketmq#g' *.xml

修改启动脚本参数

vim /usr/local/rocketmq/bin/runbroker.sh

最低配：

JAVA_OPT="${JAVA_OPT} -server -Xms1g -Xmx1g -Xmn1g"
JAVA_OPT="${JAVA_OPT} -XX:MaxDirectMemorySize=2g"

vim /usr/local/rocketmq/bin/runserver.sh

最低配：

JAVA_OPT="${JAVA_OPT} -server -Xms1g -Xmx1g -Xmn1g -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"

后台启动 NameServer

cd /usr/local/rocketmq/bin
nohup sh mqnamesrv -n 192.168.8.246:9876 &
jps

后台启动 BrokerServer A

cd /usr/local/rocketmq/bin
nohup sh mqbroker -n 192.168.8.246:9876 -c /usr/local/rocketmq/conf/2m-2s-async/broker-a.properties >/dev/null 2>&1 & 
jps

以上两种方式如果不行，可以尝试

sh mqnamesrv -n rocketmq-nameserver1:9876

sh mqbroker -n rocketmq-nameserver1:9876 -c /usr/local/rocketmq/conf/2m-2s-async/broker-a.properties autoCreateTopicEnable=true

查看日志

tail -f -n 300 /usr/local/rocketmq/logs/rocketmqlogs/namesrv.log 
tail -f -n 300 /usr/local/rocketmq/logs/rocketmqlogs/broker.log

这步操作可以忽略，但是刚刚时候使用了错的版本，导致一直连接不上。最后靠日志寻找到问题

如果自己开发玩下，记得关防火墙：systemctl stop firewalld.service

发送消息与接收消息 (如果一切正常就不用这一步)

# 发送消息
export NAMESRV_ADDR=192.168.8.108:9876  
sh /usr/local/rocketmq/bin/tools.sh org.apache.rocketmq.example.quickstart.Producer

# 接受消息
sh /usr/local/rocketmq/bin/tools.sh org.apache.rocketmq.example.quickstart.Consumer

RocketMQ - 控制台介绍

  • RocketMQ 扩展组件
    • https://github.com/apache/rocketmq-externals/tree/master
  • 控制台使用：直接引入工程后，修改配置文件即可
    • git clone https://github.com/apache/rocketmq-externals.git

RocketMQ - Docket

运行Docker

docker run -e "JAVA_OPTS=-Drocketmq.namesrv.addr=192.168.8.246:9876 -Dcom.rocketmq.sendMessageWithVIPChannel=false" -p 8080:8080 -t styletang/rocketmq-console-ng

启动与访问

  • IDEA 启动项目
  • http://localhost:8080
eddie_k2
关注
专栏目录
RocketMQ四种模式安装（单Master模式，多Master模式，多Master多Slave模式-异步复制，多Master多Slave模式-同步双写）
qq_36305027的博客
10-17 641
​ **步骤一：**先按照单机版的步骤一至三在上面的没有安装两台服务器上面配置。​ **步骤一：**先按照单机版的步骤一至三在上面的两台服务器上面配置。​ **步骤一:**将下载下来的文件上传到服务器，并执行解压、重命名。​ **步骤二：**在两台服务器上面分别启动。​ **步骤一：**关掉上述服务器中的。​ **步骤四：**查看集群状态。​ **步骤四：**查看集群状态。
搭建RocketMQ服务-多Master模式
王金铎的博客
03-08 2207
前言 RocketMQ 集群部署模式 单 master 模式 也就是只有一个 master 节点，如果master节点挂掉了，会导致整个服务不可用，线上不宜使用，适合个人学习使用。 多 master 模式 多个 master 节点组成集群，单个 master 节点宕机或者重启对应用没有影响。 优点：所有模式中性能最高 缺点：单个 master 节点宕机期间，未被消费的消息在节点恢...
RocketMQ 单机部署（单master模式）
热门推荐
lumengmeng_csdn的专栏
02-21 1万+
一、为了快速了解rockmq，先搭建一个简单的单机版的rocketmq，前期准备： 1、CentOS 7.6 64位（阿里云）（4G内存） 2、jdk1.8 3、maven 3.5.4 4、直接从官网上面下载rockmq源码（下载地址：http://rocketmq.apache.org/release_notes/release-notes-4.4.0/）       二、部署 ...
RocketMQ 入门 - 单 master 模式
Duan的博客
04-28 1552
RocketMQ 入门 what is rocketMQ：RocketMQ 是阿里开源的一款高性能、高吞吐量的分布式消息中间件。使用 RocketMQ 可以建立可靠的同步，异步和单向的消息传送。 RocketMQ 概念学习参看博文：十分钟入门RocketMQ，以及 官方文档。 rocketMQ 架构图： 实践 环境搭建可参考：linux下搭建rocketmq 在 linux 系统中...
RocketMQ之Linux下安装(单Master)
weixin_38169722的博客
09-03 167
软件环境：centos7.6jdk1.8maven3rocketmq4.2.0 安装unzip zip命令yum install -y unzip zip 查看下载地址http://rocketmq.apache.org/dowloading/releases/ 下载到/usr/local/software目录cd /usr/local/software wget http://...
RocketMQ-环境搭建(单master模式-ubuntu版)
fanrendale的博客
08-10 305
一、linux安装unzip软件 输入命令： sudo apt-get install unzip 提示：如果出现 Unable to locate package 则需要先执行命令更新： sudo apt-get update 二、添加Hosts信息 vim /etc/hosts #内网IP 172.19.129.62 rocketmq-nameserver1 172.19.129.62...
RocketMq-单机搭建（单master）
迷途中的一片羽毛博客
06-07 1513
准备工作 环境：centOS7 安装包：rocketmq-all-4.3.0-bin-release.zip JDK1.8 maven环境（主要是运维工具） 一、解压 1、使用xshell连接centos7，通过xftp上传rocketmq-all-4.3.0-bin-release.zip文件至/usr/local/software 2、解压zip文件，命令：unzip roc...
RocketMQ多Master集群搭建（一）
删繁就简三秋树
04-29 541
RocketMQ是什么？为啥要使用RocketMQ?如何搭建RocketMQ？
两台电脑搭建RocketMQ 2master2slave-异步复制 集群
01-07
两台电脑搭建RocketMQ 2master2slave-异步复制 集群 每个Master配置一个Slave，有多对Master-Slave，HA采用异步复制方式，主备有短暂消息延迟（毫秒级），这种模式的优缺点如下： 优点：即使磁盘损坏，消息丢失的...
rocketmq -双master搭建
John_chu的博客
08-01 169
1.第一步 需要两台虚拟机,然后其次都要安装rocket mq wgethttps://www.apache.org/dyn/closer.cgi?path=rocketmq/4.4.0/rocketmq-all-4.4.0-bin-release.zip 需要在hosts 去配置 120.27.69.221 rocketmq-nameserver1 47.105.129.23 ro...
RocketMQ多Master模式
ditan20061218的博客
06-25 353
了解了RocketMQ的基本知识后，我们先来学习一下RocketMQ的多Master模式。 多Master模式：集群中不存在Slave节点，集群中所有节点都是Master节点。优点是配置简单，单个Master宕机或重启对应用没有影响。但是如果某个节点的Master宕机之后，该节点上未被消费的消息在节点恢复之前无法订阅和消费，实时性受到影响。 集群搭建过程： 服务器...
RocketMQ初探(五)之RocketMQ4.2.6集群部署（单Master+双Master+2m+2s+async异步复制）
weixin_30387663的博客
08-10 180
　　以下部署方式结合众多博友的博客，经过自己一步一步实际搭建，如有雷同，侵权行为，请见谅。。。其中遇到不少的坑，希望能帮到更多的人，现在很少能找到一份完整版4.2.6版本的搭建教程了，如果你有幸遇见，那么我们必定前世有缘。进入正题…… 　　首先，官方推荐有三种部署方式：　　 多Master模式（2m-noslave） 一个集群无Slave，全是Master，例如2个Master或者3个Mas...
rocketmq-master
12-02
rocketmq,比较不错的高性能queue中间件 金融行业公司很多在用 可以学习下，里面很多设计不错
RocketMQ-master.rar
07-25
RocketMQ代码学习基础 新人入手学习最佳代码
Rocketmq-集群部署(Master-Slave)
最新发布
X_yufei的博客
06-29 547
Rocketmq集群部署(Master-Slave)
RocketMQ双Master模式搭建
骑猪喝咖啡
01-22 657
服务器环境 192.168.1.106 hadoop master 192.168.1.107 hadoop master 上传解压 tar zxvf apache-rocketmq.tar.gz -C /home/hadoop mv apache-rocketmq apache-rocketmq-4.2.0 ln -s ./apache-rocketmq-4.2.0 rocket
RocketMQ 双 Master 模式搭建（Linux环境）
猎人在吃肉
04-08 615
RocketMQ 集群部署模式 1、 单 master 模式 也就是只有一个 master 节点，称不上是集群，一旦这个 master 节点宕机，那么整个服务就不可用，适合个人学习使用。 2、 多 master 模式 多个 master 节点组成集群，单个 master 节点宕机或者重启对应用没有影响。 优点：所有模式中性能最高 缺点：单个 master 节点宕机期间，未被消费的消息在节点恢复之前...
Rocketmq 安装 双master模式（推荐这种模式，性能最好）
码农的世界你们不懂
12-20 2029
1.修改hosts文件 vim /etc/hosts192.168.119.138 rocketmq-nameserver1 192.168.119.138 rocketmq-master1 192.168.119.139 rocketmq-nameserver2 192.168.119.139 rocketmq-master2然后重启网络service network restart2.解压roc
RocketMQ-部署双Master模式
qq_40102178的博客
06-01 671
> unzip rocketmq-all-4.7.0-source-release.zip > cd rocketmq-all-4.7.0/ > mvn -Prelease-all -DskipTests clean install -U > cd distribution/target/rocketmq-4.7.0/rocketmq-4.7.0
RocketMQ简介以及双Master模式的配置
u014182745的专栏
08-14 3184
1、RocketMQ介绍 （最开始RocketMQ是阿里研究出来的，在2016-11-28捐赠给了开源软件基金会Apache。）1.1. 简介 RocketMQ 是一款分布式、队列模型的消息中间件，具有以下特点：能够保证严格的消息顺序 提供丰富的消息拉取模式 高效的订阅者水平扩展能力 实时的消息订阅机制 亿级消息堆积能力 选用理由：  强调集群无单点，可扩展，任意一点高可用，水平可扩
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

eddie_k2

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值