rocketmq使用

最新推荐文章于 2023-05-06 11:26:43 发布
最新推荐文章于 2023-05-06 11:26:43 发布
阅读量361 收藏
点赞数
分类专栏： mq 中间件 文章标签： rabbitmq
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43328833/article/details/118187043
版权

下载

https://www.apache.org/dyn/closer.cgi?path=rocketmq/4.9.0/rocketmq-all-4.9.0-bin-release.zip

配置

rocketmq环境变量配置

sudo vi /etc/profile

export ROCKETMQ_HOME=/d/dev/java/middlewares/rocketmq-all-4.9.0-bin-release

PATH=$PATH:$ROCKETMQ_HOME/bin

export NAMESRV_ADDR=127.0.0.1:9876

export PATH

 修改内存大小

vi runserver.sh

JAVA_OPT="${JAVA_OPT} -server -Xms512m -Xmx512m -Xmn256m -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"

vi runbroker.sh

JAVA_OPT="${JAVA_OPT} -server -Xms512m -Xmx512m -Xmn256m"

修改配置conf/brocker.conf 自动创建topic

 autoCreateTopicEnable=true

 启动

启动NameServer服务

./mqnamesrv

 启动Broker服务

mqbroker -n localhost:9876 autoCreateTopicEnable=true

测试启动Producer

./tools.sh org.apache.rocketmq.example.quickstart.Producer

测试启动Consumer

./tools.sh org.apache.rocketmq.example.quickstart.Consumer

关闭MQ

./mqshutdown namesrv

./mqshutdown broker

 RocketMQ集群

配置集群地址别名

sudo vi /etc/hosts  

#nameserver
192.168.158.129 rocketmq-nameserver1
192.168.158.130 rocketmq-nameserver2
# broker
192.168.158.129 rocketmq-master1
192.168.158.130 rocketmq-slave2
192.168.158.129 rocketmq-master2
192.168.158.130 rocketmq-slave1

 创建消息存储路径

#/home/sirui/rocketmq

mkdir -p store/master/commitlog store/master/consumequeue store/master/index

mkdir -p store/slave/commitlog store/slave/consumequeue store/slave/index

conf集群配置

服务器1：broker-a.properties

brokerClusterName=rocketmq-cluster
#broker名字，注意此处不同的配置文件填写的不一样
brokerName=broker-a
#0 表示 Master， >0 表示 Slave
brokerId=0
#nameServer地址，分号分割(重点)
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876
#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=10911
#删除文件时间点，默认凌晨 0点
deleteWhen=00
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/home/sirui/rocketmq/store/master
#commitLog 存储路径
storePathCommitLog=/home/sirui/rocketmq/store/master/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/home/sirui/rocketmq/store/master/consumequeue
#消息索引存储路径
storePathIndex=/home/sirui/rocketmq/store/master/index
#checkpoint 文件存储路径
storeCheckpoint=/home/sirui/rocketmq/store/master/checkpoint
#abort 文件存储路径
abortFile=/home/sirui/rocketmq/store/master/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE

brokerRole=ASYNC_MASTER
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

服务器1：broker-b-s.properties

brokerClusterName=rocketmq-cluster
#broker名字，注意此处不同的配置文件填写的不一样
brokerName=broker-b
#0 表示 Master， >0 表示 Slave
brokerId=1
#nameServer地址，分号分割(重点)
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876
#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=11911
#删除文件时间点，默认凌晨 0点
deleteWhen=00
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/home/sirui/rocketmq/store/slave
#commitLog 存储路径
storePathCommitLog=/home/sirui/rocketmq/store/slave/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/home/sirui/rocketmq/store/slave/consumequeue
#消息索引存储路径
storePathIndex=/home/sirui/rocketmq/store/slave/index
#checkpoint 文件存储路径
storeCheckpoint=/home/sirui/rocketmq/store/slave/checkpoint
#abort 文件存储路径
abortFile=/home/sirui/rocketmq/store/slave/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE

brokerRole=SLAVE
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

服务器2：broker-b.properties

brokerClusterName=rocketmq-cluster
#broker名字，注意此处不同的配置文件填写的不一样
brokerName=broker-b
#0 表示 Master， >0 表示 Slave
brokerId=0
#nameServer地址，分号分割(重点)
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876
#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=10911
#删除文件时间点，默认凌晨 0点
deleteWhen=00
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/home/sirui/rocketmq/store/master
#commitLog 存储路径
storePathCommitLog=/home/sirui/rocketmq/store/master/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/home/sirui/rocketmq/store/master/consumequeue
#消息索引存储路径
storePathIndex=/home/sirui/rocketmq/store/master/index
#checkpoint 文件存储路径
storeCheckpoint=/home/sirui/rocketmq/store/master/checkpoint
#abort 文件存储路径
abortFile=/home/sirui/rocketmq/store/master/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE

brokerRole=ASYNC_MASTER
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

服务器2：broker-a-s.properties

brokerClusterName=rocketmq-cluster
#broker名字，注意此处不同的配置文件填写的不一样
brokerName=broker-a
#0 表示 Master， >0 表示 Slave
brokerId=1
#nameServer地址，分号分割(重点)
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876
#在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=11911
#删除文件时间点，默认凌晨 0点
deleteWhen=00
#文件保留时间，默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/home/sirui/rocketmq/store/slave
#commitLog 存储路径
storePathCommitLog=/home/sirui/rocketmq/store/slave/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/home/sirui/rocketmq/store/slave/consumequeue
#消息索引存储路径
storePathIndex=/home/sirui/rocketmq/store/slave/index
#checkpoint 文件存储路径
storeCheckpoint=/home/sirui/rocketmq/store/slave/checkpoint
#abort 文件存储路径
abortFile=/home/sirui/rocketmq/store/slave/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE

brokerRole=SLAVE
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128

启动集群

服务器A：

服务器A

nohup bin/mqnamesrv & 

服务器B

nohup bin/mqnamesrv &

#服务器A master1

nohup bin/mqbroker -c conf/2m-2s-async/broker-a.properties &

#服务器B master2

nohup bin/mqbroker -c conf/2m-2s-async/broker-b.properties &

#服务器A slave2

nohup bin/mqbroker -c conf/2m-2s-async/broker-b-s.properties &

#服务器B slave1

nohup bin/mqbroker -c conf/2m-2s-async/broker-a-s.properties &

 rocketmq 管理平台

 下载

https://github.com/apache/rocketmq-externals/tree/master/rocketmq-console

修改配置：resources/application.properties

server.port=8800

rocketmq.config.namesrvAddr=192.168.158.129:9876;192.168.158.130:9876

打包命令

mvn clean package -Dmaven.test.skip=true

 启动

java -jar rocketmq-console-ng-2.0.0.jar > system.log & echo $! > pid

失败的码农
关注
专栏目录
RocketMQ使用手册
06-21
"RocketMQ 使用手册" RocketMQ 是一款分布式、队列模型的消息中间件，具有以下特点： * 能够保证严格的消息顺序 * 提供丰富的消息拉取模式 * 高效的订阅者水平扩展能力 * 实时的消息订阅机制 * 亿级消息堆积能力 ...
RocketMQ消息存储
YangzaiLeHeHe的博客
07-15 2425
RocketMQ主要存储文件包含消息文件（commitLog）、消息消费队列文件(consume-queue)、Hash索引文件(IndexFile)、检测点文件(checkpoint)、abort(关闭异常文件)、单个消息存储文件、消息消费队列文件、Hash索引文件长度固定以便使用内存映射机制进行文件的读写操作。RocketMQ组织文件以文件的起始偏移量来命名文件，这样根据偏移量能快速的定位到真...
RocketMQ各种集群模式介绍
Leon_Jinhai_Sun的博客
06-13 1379
集群模式 1）单Master模式 这种方式风险较大，一旦Broker重启或者宕机时，会导致整个服务不可用。不建议线上环境使用,可以用于本地测试。 2）多Master模式 一个集群无Slave，全是Master，例如2个Master或者3个Master，这种模式的优缺点如下： 优点：配置简单，单个Master宕机或重启维护对应用无影响，在磁盘配置为RAID10时，即使机器宕机不可恢复情况下，由于RAID10磁盘非常可靠，消息也不会丢（异步刷盘丢失少量消息，同步刷盘一条不丢），性能最高；
RocketMQ（一）使用docker-compose部署RocketMQ 4.9.4集群
最新发布
bacawa的博客
05-06 5517
docker-compose部署rocketMQ 4.9.4集群，并做数据持久化
保姆级Windows下安装RocketMQ（附简单小Demo）
持续Java学习中
05-15 2646
Windows下安装RocketMQ1、下载RocketMQ2、启动服务3、测试RocketMQ自带功能4、RocketMQ控制台5、编写对应的Java测试Demo 1、下载RocketMQ 下载地址：https://github.com/apache/rocketmq 可选择自己想要的版本进行加载 最终你会得到这样一个文件内容 2、启动服务 1、配置MQ的环境变量 ROCKETMQ_HOME=安装路径\rocketmq-all-4.9.0-bin-release PATH=%ROCK
RocketMQ集群搭建
yanyf的博客
12-24 298
各角色介绍 Producer：消息的发送者，举例：发信者 Consumer：消息的接收者，举例：收信者 Broker：暂存和传输消息，举例：邮局 NameServer：管理Broker，举例：各个邮局的管理机构 Topic：区分消息的种类，一个发送者可以发送消息给一个或多个Topic，一个消息的接收者可以订阅一个或者多个Topic消息 MessageQueue：相当于是Topic的...
rocketmq使用.zip
02-21
本压缩包“rocketmq使用.zip”包含了关于RocketMQ使用和事务消息的相关资料，让我们一起来深入探讨这些知识点。 首先，我们要理解RocketMQ的基本概念和架构。RocketMQ的核心组件包括Producer、Consumer、NameServer...
rocketmq使用手册
08-29
### RocketMQ 使用手册 #### 一、RocketMQ 简介及特性 RocketMQ 是一款高性能、可扩展的分布式消息中间件，它被设计用于解决大规模互联网应用中的消息传输问题。该中间件具备以下特点： 1. **严格的消息顺序保证*...
RocketMQ使用与实现.pdf
03-09
### RocketMQ 使用与实现知识点详解 #### 一、RocketMQ简介 - **定义**：RocketMQ是一款由阿里巴巴研发并开源的分布式消息中间件，具备高度可靠性和灵活性，被广泛应用于大规模分布式系统中。 - **核心特性**： - ...
安装 RocketMQ 报错 Could not find artifact io.netty:netty-tcnative:jar:linux-x86_32:1.1.33.Fork22 解决办法
HeatDeath的博客
04-28 6511
Could not find artifact io.netty:netty-tcnative:jar:linux-x86_32:1.1.33.Fork22 Could not resolve dependencies for project org.apache.rocketmq:rocketmq-remoting:jar:4.2.0: Could not find artifa...
Linux 安装 RocketMQ 4.9.2
吾生有涯，而知无涯。
09-22 2222
Linux 安装 RocketMQ
RocketMQ（二）Linux下安装RocketMQ 4.9.2
weixiaohuai的博客
03-14 4194
目录 一、安装JDK1.8 二、安装RocketMQ 三、启动RocketMQ 四、测试消息发送和消费 五、关闭RocketMQ 六、可视化管理页面安装 七、遇到的问题 一、安装JDK1.8 RocketMQ是使用Java开发的，所以需要在Linux系统内安装JDK环境。主要有下面几个步骤： a. 从官网下载JDK1.8: Java Downloads | Oracle b. 将下载好的JDK安装包上传到Linux服务器中并解压缩，笔者这里是/java目录下 [admin@admin
Could not resolve dependencies for project
热门推荐
weixin_46809332的博客
05-27 2万+
当初报这个错误，我以为就是普通的错误，csdn随便一搜，后来发现人类的悲欢并不相同。 其实这个错误很明显就是找不到依赖，在我的maven工程中，web依赖service,service依赖dao，dao依赖domain,domain依赖utils。 一般来说，我们就是先对父工程进行clean 在进行install工程，然后在对子工程分别依此进行依赖。 但是进行父工程的时候就是报找不到： [ERROR] Failed to execute goal on project ssm_dao: Could
已解决:Could not resolve dependencies for project
qq_37200262的博客
11-04 4590
已解决:Could not resolve dependencies for project
阿里云安装RocketMQ 4.9.2
前尘忆梦Memory的博客
12-24 1543
阿里云安装RocketMQ 4.9.2
windows安装RocketMQ4.9.0
qq_45752401的博客
07-08 1882
1，首先去官网下载安装包（我这里是4.9.0的版本，你们随意） 前提条件：已安装jdk1.8及maven 2，选择想要安装的目录，直接解压就行 3，配置环境变量 4，启动 （1）启动NAMESERVER 使用cmd打开命令窗口，进入到rocketmq的bin目录下，执行：start mqnamesrv.cmd，若成功会弹出如下提示框，请勿关闭此框 （2）启动BROKER 同样在rocketmq的bin目录下，执行：start mqbroker.cmd -n 127.0.0.1:9876 aut
RocketMQ常见的错误
点点的博客
03-20 2502
1、Please set the JAVA_HOME variable in your environment, We need java(x64) 解决： • 本地需要配置 JAVA_HOME 使用命令 vim ~/.bash_profile JAVA_HOME="/Library/Java/JavaVirtualMachines/jdk1.8.0_171.jdk/Contents/Home" export JAVA_HOME CLASS_PATH="$JAVA_HOME/lib" PATH=".$PAT
Windows 下安装 RocketMQ 遇到的问题
N_007的博客
06-08 635
Windows 下安装 RocketMQ 遇到的问题，此时不应有 \rocketmq-4.9.3\bin)。错误: 找不到或无法加载主类 Files\Java\jdk1.8.0_181\lib\dt.jar;D:\Program
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值