RocketMQ通信机制

最新推荐文章于 2024-08-06 11:39:28 发布

ph3636

最新推荐文章于 2024-08-06 11:39:28 发布

阅读量1.3k

点赞数

分类专栏： RocketMQ 文章标签： RocketMQ

本文链接：https://blog.csdn.net/ph3636/article/details/89066908

版权

本文介绍了RocketMQ的通信机制，包括NameServer、Broker、Producer和Consumer的角色。着重讲解了Broker与NameServer的注册与心跳，Producer的路由信息获取，以及Remoting通信模块的设计。RocketMQ自定义了通信协议，并基于Netty扩展了RemotingCommand类，实现高效的数据传输。通信方式包括同步、异步和单向，重点阐述了异步通信流程。此外，还讨论了Reactor多线程模型在RocketMQ中的应用。

摘要由CSDN通过智能技术生成

简介

RocketMQ消息队列集群主要包括NameServe、Broker(Master/Slave)、Producer、Consumer4个角色，基本通讯流程如下：

(1) Broker启动后需要完成一次将自己注册至NameServer的操作；随后每隔30s时间定时向NameServer上报Topic路由信息。

(2) 消息生产者Producer作为客户端发送消息时候，需要根据消息的Topic从本地缓存的TopicPublishInfoTable获取路由信息。如果没有则更新路由信息会从NameServer上重新拉取，同时Producer会默认每隔30s向NameServer拉取一次路由信息。

(3) 消息生产者Producer根据2）中获取的路由信息选择一个队列（MessageQueue）进行消息发送；Broker作为消息的接收者接收消息并落盘存储。

(4) 消息消费者Consumer根据2）中获取的路由信息，并再完成客户端的负载均衡后，选择其中的某一个或者某几个消息队列来拉取消息并进行消费。

从上面1）~3）中可以看出在消息生产者, Broker和NameServer之间都会发生通信（这里只说了MQ的部分通信），因此如何设计一个良好的网络通信模块在MQ中至关重要，它将决定RocketMQ集群整体的消息传输能力与最终的性能。

rocketmq-remoting 模块是 RocketMQ消息队列中负责网络通信的模块，它几乎被其他所有需要网络通信的模块（诸如rocketmq-client、rocketmq-broker、rocketmq-namesrv）所依赖和引用。为了实现客户端与服务器之间高效的数据请求与接收，RocketMQ消息队列