RocketMQ学习（一）：入门

最新推荐文章于 2024-05-11 09:53:00 发布
最新推荐文章于 2024-05-11 09:53:00 发布
阅读量332 收藏 1
点赞数
分类专栏： 消息中间件 # RocketMQ 文章标签： RocketMQ
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/IcyDate/article/details/102853020
版权

目录

RocketMQ各个角色介绍

准备工作

JDK安装（已搭建可跳过）

RocketMQ安装

启动RocketMQ

1、启动NameServer

2、启动Broker

3、关闭RocketMQ

测试RocketMQ

RocketMQ是阿里巴巴2016年MQ中间件，使用Java语言开发，在阿里内部，RocketMQ承接了例如“双11”等高并发场景的消息流转，能够处理万亿级别的消息。

RocketMQ各个角色介绍

  • Producer：消息的发送者；举例：发信者

  • Consumer：消息接收者；举例：收信者

  • Broker：暂存和传输消息；举例：邮局

  • NameServer：管理Broker；举例：各个邮局的管理机构

  • Topic：区分消息的种类；一个发送者可以发送消息给一个或者多个Topic；一个消息的接收者可以订阅一个或者多个Topic消息

  • Message Queue：相当于是Topic的分区；用于并行发送和接收消息

准备工作

RocketMQ下载

我们在这里下载二进制版本的文件，也就是zip包，以linux为例，必备环境有：

  • Linux64位系统
  • JDK1.8（64位）

JDK安装（已搭建可跳过）

以jdk-8u221-linux-x64.tar.gz为例，下载好后先将其拷贝至服务器，然后创建想要存放的文件夹（位置自拟）

mkdir /opt/java
# 笔者的jdk放在software里，将其拷贝过来
cp /opt/software/jdk-8u221-linux-x64.tar.gz /opt/java
cd /opt/java

解压jdk,完成后会在当前目录下生成jdk1.8.0_221文件夹

tar -zxvf jdk-8u211-linux-x64.tar.gz
# 解压之后删除jdk包(不删也行，笔者是因为software里有)
rm -f jdk-8u211-linux-x64.tar.gz

设置环境变量，这一步的目的是使linux全局都能使用jdk里的命令，不需要进到相应目录里

vim /etc/profile

# 添加以下内容，注意路径对应你的安装路径
export JAVA_HOME=/opt/java/jdk1.8.0_221
export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$PATH:$JAVA_HOME/bin

# 执行下方命令使得环境变量立刻生效
source /etc/profile

测试，成功显示jdk版本则表示成功

RocketMQ安装

以rocketmq-all-4.5.2-bin-release.zip为例，拷贝至服务器，创建要存放的目录

mkdir /opt/rocketmq
cp /opt/software/rocketmq-all-4.5.2-bin-release.zip /opt/rocketmq
cd /opt/rocketmq

解压rocketmq二进制文件

# 安装unzip
yum install unzip
# 解压
unzip rocketmq-all-4.5.2-bin-release.zip
# 删除压缩包
rm -f rocketmq-all-4.5.2-bin-release.zip

完成后，可以看到生成了rocketmq-all-4.5.2-bin-release文件夹，打开能够看见以下几个目录

  • benchmark：一些demo，方便测试

  • bin：启动脚本，包括shell脚本和CMD脚本

  • conf：实例配置文件 ，包括broker配置文件、logback配置文件等

  • lib：依赖jar包，包括Netty、commons-lang、FastJSON等

启动RocketMQ

建议先修改两个配置文件，因为RocketMQ默认使用的JVM内存很大，可能导致启动失败，都是以后台方式启动。

# 进入RocketMQ的bin目录
cd /opt/rocketmq/rocketmq-all-4.5.2-bin-release/bin/
# 编辑runbroker.sh和runserver.sh修改默认JVM大小
vim runbroker.sh
vim runserver.sh

# 参考设置
JAVA_OPT="${JAVA_OPT} -server -Xms256m -Xmx256m -Xmn128m -XX:MetaspaceSize=128m  -XX:MaxMetaspaceSize=320m"

1、启动NameServer

# 1.进入bin目录，如果将rocketmq配置到环境变量了就不需要
cd /opt/rocketmq/rocketmq-all-4.5.2-bin-release/bin/
# 2.启动NameServer,后台启动方式
nohup sh mqnamesrv &
# 3.查看启动日志
tail -f ~/logs/rocketmqlogs/namesrv.log

执行时会出现nohup: ignoring input and appending output to ‘nohup.out’这样的信息，直接回车就行，查看日志时，看到下图信息则表示NameServer启动成功

或者使用jps命令查看当前正在运行的java程序里有无NameServer

2、启动Broker

# 1.启动Broker，-n代表指定Broker要连接的NameServer（默认端口9876）
nohup sh mqbroker -n localhost:9876 &
# 2.查看启动日志
tail -f ~/logs/rocketmqlogs/broker.log

查看日志，出现以下信息代表启动成功

查看jps

3、关闭RocketMQ

先关Broker，再关NameServer

# 1.关闭NameServer
sh bin/mqshutdown namesrv
# 2.关闭Broker
sh bin/mqshutdown broker

测试RocketMQ

需打开两个连接服务器的窗口，一个执行生产者脚本，另一个执行消费者脚本

生产者

# 1.设置环境变量
export NAMESRV_ADDR=localhost:9876
# 2.使用安装包的Demo发送消息（需要进入bin目录）
sh tools.sh org.apache.rocketmq.example.quickstart.Producer

消费者

# 1.设置环境变量
export NAMESRV_ADDR=localhost:9876
# 2.接收消息
sh tools.sh org.apache.rocketmq.example.quickstart.Consumer

查看现象会发现，生产者发出的消息，都被消费者接收了，代表RocketMQ生效了

# 生产者打印
SendResult [sendStatus=SEND_OK, msgId=AC1353A428356FF3C5B5028DCCEB03E3, offsetMsgId=AC1353A400002A9F0000000000083892, messageQueue=MessageQueue [topic=TopicTest, brokerName=izuf6gvuc5k1i27heipwewz, queueId=2], queueOffset=748]
SendResult [sendStatus=SEND_OK, msgId=AC1353A428356FF3C5B5028DCCED03E4, offsetMsgId=AC1353A400002A9F0000000000083946, messageQueue=MessageQueue [topic=TopicTest, brokerName=izuf6gvuc5k1i27heipwewz, queueId=3], queueOffset=749]
SendResult [sendStatus=SEND_OK, msgId=AC1353A428356FF3C5B5028DCCEE03E5, offsetMsgId=AC1353A400002A9F00000000000839FA, messageQueue=MessageQueue [topic=TopicTest, brokerName=izuf6gvuc5k1i27heipwewz, queueId=0], queueOffset=749]
SendResult [sendStatus=SEND_OK, msgId=AC1353A428356FF3C5B5028DCCEF03E6, offsetMsgId=AC1353A400002A9F0000000000083AAE, messageQueue=MessageQueue [topic=TopicTest, brokerName=izuf6gvuc5k1i27heipwewz, queueId=1], queueOffset=749]

# 消费者打印
ConsumeMessageThread_16 Receive New Messages: [MessageExt [queueId=0, storeSize=180, queueOffset=606, sysFlag=0, bornTimestamp=1572580446202, bornHost=/172.19.83.164:56686, storeTimestamp=1572580446203, storeHost=/172.19.83.164:10911, msgId=AC1353A400002A9F000000000006A7CA, commitLogOffset=436170, bodyCRC=1150532008, reconsumeTimes=0, preparedTransactionOffset=0, toString()=Message{topic='TopicTest', flag=0, properties={MIN_OFFSET=0, MAX_OFFSET=750, CONSUME_START_TIME=1572580468463, UNIQ_KEY=AC1353A428356FF3C5B5028DC7FA01A9, WAIT=true, TAGS=TagA}, body=[72, 101, 108, 108, 111, 32, 82, 111, 99, 107, 101, 116, 77, 81, 32, 52, 50, 53], transactionId='null'}]] 
ConsumeMessageThread_19 Receive New Messages: [MessageExt [queueId=1, storeSize=180, queueOffset=612, sysFlag=0, bornTimestamp=1572580446263, bornHost=/172.19.83.164:56686, storeTimestamp=1572580446264, storeHost=/172.19.83.164:10911, msgId=AC1353A400002A9F000000000006B95E, commitLogOffset=440670, bodyCRC=2075712480, reconsumeTimes=0, preparedTransactionOffset=0, toString()=Message{topic='TopicTest', flag=0, properties={MIN_OFFSET=0, MAX_OFFSET=750, CONSUME_START_TIME=1572580468487, UNIQ_KEY=AC1353A428356FF3C5B5028DC83701C2, WAIT=true, TAGS=TagA}, body=[72, 101, 108, 108, 111, 32, 82, 111, 99, 107, 101, 116, 77, 81, 32, 52, 53, 48], transactionId='null'}]] 
ConsumeMessageThread_18 Receive New Messages: [MessageExt [queueId=1, storeSize=180, queueOffset=611, sysFlag=0, bornTimestamp=1572580446257, bornHost=/172.19.83.164:56686, storeTimestamp=1572580446258, storeHost=/172.19.83.164:10911, msgId=AC1353A400002A9F000000000006B68E, commitLogOffset=439950, bodyCRC=197152660, reconsumeTimes=0, preparedTransactionOffset=0, toString()=Message{topic='TopicTest', flag=0, properties={MIN_OFFSET=0, MAX_OFFSET=750, CONSUME_START_TIME=1572580468487, UNIQ_KEY=AC1353A428356FF3C5B5028DC83101BE, WAIT=true, TAGS=TagA}, body=[72, 101, 108, 108, 111, 32, 82, 111, 99, 107, 101, 116, 77, 81, 32, 52, 52, 54], transactionId='null'}]] 
ConsumeMessageThread_1 Receive New Messages: [MessageExt [queueId=1, storeSize=180, queueOffset=610, sysFlag=0, bornTimestamp=1572580446251, bornHost=/172.19.83.164:56686, storeTimestamp=1572580446252, storeHost=/172.19.83.164:10911, msgId=AC1353A400002A9F000000000006B3BE, commitLogOffset=439230, bodyCRC=212700045, reconsumeTimes=0, preparedTransactionOffset=0, toString()=Message{topic='TopicTest', flag=0, properties={MIN_OFFSET=0, MAX_OFFSET=750, CONSUME_START_TIME=1572580468487, UNIQ_KEY=AC1353A428356FF3C5B5028DC82B01BA, WAIT=true, TAGS=TagA}, body=[72, 101, 108, 108, 111, 32, 82, 111, 99, 107, 101, 116, 77, 81, 32, 52, 52, 50], transactionId='null'}]]

 

IcyDate
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
RocketMQ 学习方法之我见
中间件兴趣圈
10-28 950
亲爱的读者朋友，RocketMQ 实战专辑的全部内容即将更新完毕，前面的篇幅主要是介绍 RocketMQ 技术本身，本篇想和大家谈谈我是如何学习 RocketMQ 的，尽量做到授之以渔。 我想大家都会有这样一个共识：光学理论没用，要实战。这个有一定的道理，但不应该成为阻碍我们学习的理由。对知识的学习我们当然需要优先学习研究工作中常用的技术，例如以微服务为例，现在市面上 Spring Clould ...
RocketMq学习
qq_45756124的博客
06-13 298
消息存储架构 CommitLog：消息主体以及元数据的存储主体，存储Producer端写入的消息主体内容,消息内容不是定长的。单个文件大小默认1G。 ConsumeQueue：消息消费队列，引入的目的主要是提高消息消费的性能，Consumer即可根据ConsumeQueue来查找待消费的消息。其中，ConsumeQueue（逻辑消费队列）作为消费消息的索引，保存了指定Topic下的队列消息在CommitLog中的起始物理偏移量offset，消息大小size和消息Tag的HashCode值。 IndexFi
使用docker-compose/docker部署RocketMQ5.x 单机部署+配置参数详解
最新发布
小匠的Blog
05-11 1043
Broker启动脚本中有一个自动计算最大堆内存和新生代内存的函数会导致在不同硬件环境下设置最大堆内存和新生代内存环境变量不被应用，，这里先提前copy一份容器内部启动脚本做挂载，如果想自定义内存可以自己调整。1、启动容器2、复制容器内启动脚本到挂载目录/usr/local/rocketmq/nameserver/bin3、修改runbroker.sh# 打开脚本文件找到调用calculate_heap_sizes函数的位置注释掉保存即可，拉到脚本最底部就能找到4、停止&删除容器。
RocketMQ的学习
qq_45003354的博客
05-30 689
​ RocketMQ的官网地址： http://rocketmq.apache.org ，github地址是 https://github.com/apache/rocketmq ,最新版本的RocketMQ可以到官网上进行下载。历史版本需要到Github仓库中下载。下载地址：https://github.com/apache/rocketmq/releases。NameServer : 提供轻量级的Broker路由服务。 Broker：实际处理消息存储、转发等服务的核心组件。 Producer：消息生产者
rocketmq入门学习
******* ▄︻┻┳═一 *******
03-10 2058
官方地址：https://rocketmq.apache.org/ 安装包下载地址：https://archive.apache.org/dist/rocketmq/ 一、rocketmq简介 RcoketMQ 是一款低延迟、高可靠、可伸缩、易于使用的消息中间件。具有以下特性： 支持发布/订阅（Pub/Sub）和点对点（P2P）消息模型 在一个队列中可靠的先进先出（FIFO）和严格的顺序传递 支持拉（pull）和推（push）两种消息模式 单一队列百万消息的堆积能力 支持多种消息协议，如 JMS、MQTT
你一直想学的 RocketMQ，原来这样学才最省时省力
CSDN资讯
09-27 2689
在长期面试和咨询的过程中，我发现一个现象，一个知识点，应届毕业生有问、工作 3、4 年的工程师在问、工作 10 年以上的专家也有在问：广播消费和集群消费有什么区别？一个消费组订阅多个 T...
rocketmq-learning:结合应用场景介绍如何使用rocketmq，尝试打造rocketmq领域最佳的入门示例，并包含40+篇原创博文，两本免费电子书
03-08
火箭学习结合应用场景介绍如何使用rocketmq，尝试打造rocketmq领域最佳的入门示例代码介绍代码组织将遵循功能，每一个功能都会结合特定使用场景。 transaction事务消息发送。RocketMQ免费电子书获取方式：关注...
RocketMq学习视频
08-11
一、rocketmq入门到精通视频教程目录大纲 001-001_RocketMQ_简介 002-002_RocketMQ_核心概念详解 003-003_RocketMQ_集群构建模型详解（一） 004-004_RocketMQ_集群构建模型详解（二） 005-005_RocketMQ_双主模式集群...
分布式消息系统RocketMQ的入门.docx
10-18
2. **Producer Group**：一类Producer的集合，它们通常发送相同类型的消息，并遵循相同的发送逻辑。 3. **Consumer**：消息消费者，主要由后台系统用于异步消费消息。 4. **Push Consumer**：由服务端主动推送给消费...
RocketMQ入门实战及源码解析.7z
06-23
RocketMQ是中国阿里巴巴开源的一款分布式消息中间件，它在大规模分布式系统中扮演着重要的角色，用于处理高并发、低延迟的...提供的"RocketMQ源码解析.pdf"和"RocketMQ入门指南.pdf"将是深入理解RocketMQ的宝贵资源。
消息中间件+RocketMq+入门文档+用于学习
11-16
【消息中间件RocketMQ入门】 消息中间件（MQ）是一种在分布式系统中用于通信的技术，它通过消息队列作为消息的容器，使得系统组件之间的交互变得更加高效和解耦。RocketMQ是由阿里巴巴开源的高性能消息中间件，已被...
rocketmq学习笔记ppt
07-15
rocketmq学习 rocketmq深入
rocketMQ的安装及使用.ppt
03-05
RocketMQ-4.0.0的安装及使用
RocketMQ相关资料（含rocketmq3.4.2用户指南）
06-30
阿里RocketMQ_用户指南_V3.2.4_最新版本.pdf benchmark.pdf Metaq在JDk 7下的异常及解决方案.docx mqvsmq.pdf RocketMQ_原理简介.pdf RocketMQ_admin.pdf RocketMQ_benchmark.pdf RocketMQ_calvinzhan - 类图.pdf RocketMQ_calvinzhan.pdf RocketMQ_design-整体设计文档.pdf RocketMQ_design.pdf RocketMQ_experience.pdf RocketMQ_userguide_04.02_down.pdf RocketMQ_userguide.pdf rocketmq-原理简析（适合初级使用者）.docx RocketMQ：一个纯java的开源消息中间件--开发测试环境搭建.doc RocketMQ的一些特性.doc RocketMQ命令整理.doc RocketMQ群问题整理.docx RocketMQ运维指令整理.docx
回顾 | Apache Flink X Apache RocketMQ · 上海站（PPT下载）
cengsesha1431的博客
07-09 259
7 月 6 日，Apache Flink Meetup X Apache RocketMQ · 上海站，来自阿里巴巴、网易的 Flink 技术专家与 Apache RocketMQ 社区大咖一起分享关于 Flink、RocketMQ 的应用实践与前沿技术。 《网易云音乐消息队列改造之路与 Apache Flink 应用实践》 林德智 | 网易云音乐 消息队列负责人 岳猛 | Apache F...
RocketMQ性能测试
myzksky的专栏
05-18 3576
今天测试了一下RocketMQ性能，暂时记录一下本地Rocket服务单机测试单线程测试结果如下：Producer 只有一个json数据 {"name","test-data-1"}1000个  耗时    58s 17.2个/s1000个  耗时    57s 17.3个/s2000个  耗时    110s 18.0个/s2000个  耗时    110s 17.8个/s2000个  耗时   ...
RocketMQ学习总结
xiaoye的博客
10-12 511
1、吞吐量：kafka>rocketmq>rabbitmq；消息堆积：kafka>rocketmq>rabbitmq； 2、rabbitmq天然支持集群配置，默认conf配置下有两主两从异步、两主两从同步、两主没有从 3、为了保证正确运行，最好给出4g内存 4、先启动namesrv再启动broker，rocketmq控制台官方没有给，但是有开源爱好者研发rocketm...
RocketMQ部署之动态设置JVM启动参数
念念不忘，必有回响
06-21 740
这里是weihubeats,觉得文章不错可以关注公众号，文章首发。拒绝营销号，拒绝标题党。
linux安装RocketMQ
m0_73570288的博客
10-12 733
使用安装包的Demo发送消息。启动NameServer。关闭NameServer。
RocketMQ入门教程：从基础到实践
2. ProducerGroup：一组Producer的集合，它们通常发送相似类型的消息，并遵循相同的发送逻辑。 3. Consumer：消息消费者，用于接收并处理消息，通常在后台异步执行。 4. PushConsumer：被动消费模式，由RocketMQ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值