RocketMQ实战:生产环境中,autoCreateTopicEnable为什么不能设置为true

当RocketMQ的autoCreateTopicEnable设为true,可能导致新创建的Topic只在一个Broker上拥有队列,而非预期的全集群分布。文章探讨了RocketMQ的基本路由规则,分析了autoCreateTopicEnable的机制,解释了Broker如何在生产环境中处理不存在主题的情况,并揭示了由此引发的潜在问题。通过研究,作者指出快速连续发送消息可能使主题在两个Broker上创建队列。
摘要由CSDN通过智能技术生成
  • topicTest5只在broker-a服务器上创建了队列,并没有在broker-b服务器创建队列,不符合期望。

  • 默认读写队列的个数为4。

我们再来看一下RocketMQ默认topic的路由信息截图如下:

在这里插入图片描述

从图中可以默认Topic的路由信息为broker-a、broker-b上各8个队列。

2、思考


默认Topic的路由信息是如何创建的?

  1. Topic的路由信息是存储在哪里?Nameserver?broker?

  2. RocketMQ Topic默认队列个数是多少呢?

3、原理


3.1 RocketMQ基本路由规则

在这里插入图片描述

  1. Broker在启动时向Nameserver注册存储在该服务器上的路由信息,并每隔30s向Nameserver发送心跳包,并更新路由信息。

  2. Nameserver每隔10s扫描路由表,如果检测到Broker服务宕机,则移除对应的路由信息。

  3. 消息生产者每隔30s会从Nameserver重新拉取Topic的路由信息并更新本地路由表;在消息发送之前,如果本地路由表中不存在对应主题的路由消息时,会主动向Nameserver拉取该主题的消息。

回到本文的主题:autoCreateTopicEnable,开启自动创建主题,试想一下,如果生产者向一个不存在的主题发送消息时,上面的任何一个步骤都无法获取一个不存在的主题的路由信息,那该如何处理这种情况呢?

在RocketMQ中,如果autoCreateTopicEnable设置为true,消息发送者向NameServer查询主题的路由消息返回空时,会尝试用一个系统默认的主题名称(MixAll.AUTO_CREATE_TOPIC_KEY_TOPIC),此时消息发送者得到的路由信息为:

在这里插入图片描述

但问题就来了,默认Topic在集群的每一台Broker上创建8个队列,那问题来了,为啥新创建的Topic只在一个Broker上创建4个队列?

3.2

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值