面试题：一个consumer订阅两个topic，其中一个topic消息过多堆积了，会影响另一个topic消费吗

最新推荐文章于 2023-04-12 09:12:02 发布
最新推荐文章于 2023-04-12 09:12:02 发布
阅读量2.4k 收藏 3
点赞数 1
分类专栏： 队列 java 文章标签： java rocketmq
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/b1303110335/article/details/118755341
版权
java 同时被 2 个专栏收录
64 篇文章 2 订阅
订阅专栏
队列
16 篇文章 0 订阅
订阅专栏

问题：一个consumer订阅两个topic，其中一个topic消息过多堆积了，会影响另一个topic消费吗
答案：不影响。
为什么呢？

  • 因为rocketmq首先对消息进行负载均衡（rebalance），就是将topic中的队列按照consumer进行分配之后，将pullRequest(里面存放了topic,brokerName,queueId)放入到一个linkedBlockingQueue中，这个时候已经排好了后面消费的顺序。例如100个request中有大概50个是TopicTest1,另外50个是TopicTest2。

  • 在实际进行拉取的时候，多个线程从LinkedBlockingQueue中去take消息，按照放入的顺序进行消费，这个时候topicTest1消息已经堆积了，但还是会照常去消费TopicTest2，如果处理速度不影响的话，只有当TopicTest消费的速度过慢，导致将所有的线程都占住了，那也只是一时的，会影响TopicTest2的消费速度，但不会阻塞TopicTest2的消费。

  • 如下图所示，PullMessageService线程负责将request放入队列，同时NettyClientPublicExecutor_1,2,3,4负责处理消息拉取，他们会并发从队列中获取消息，当获取到消息并处理完后会接着去take新的消息然后继续处理。

-------放入消息-----：MessageQueue [topic=%RETRY%testConsumer, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=1]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=1]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_2
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=%RETRY%testConsumer, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_2
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
拉取到消息：TopicTest1,NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
拉取到消息：TopicTest1,NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=%RETRY%testConsumer, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=1]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=%RETRY%testConsumer, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=3]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=1]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
拉取到消息：TopicTest1,NettyClientPublicExecutor_1
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=%RETRY%testConsumer, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=1]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=3]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=%RETRY%testConsumer, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=1]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=%RETRY%testConsumer, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
拉取到消息：TopicTest1,NettyClientPublicExecutor_2
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=0]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_4
处理TopicTest2...NettyClientPublicExecutor_4
-------放入消息-----：MessageQueue [topic=%RETRY%testConsumer, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=0]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=3]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_1
处理TopicTest2...NettyClientPublicExecutor_1
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=2]PullMessageService
-------放入消息-----：MessageQueue [topic=TopicTest2, brokerName=broker-a, queueId=1]PullMessageService
拉取到消息：TopicTest1,NettyClientPublicExecutor_3
-------放入消息-----：MessageQueue [topic=TopicTest1, brokerName=broker-a, queueId=2]PullMessageService
拉取到消息：TopicTest2,NettyClientPublicExecutor_2
处理TopicTest2...NettyClientPublicExecutor_2
拉取到消息：TopicTest2,NettyClientPublicExecutor_3
处理TopicTest2...NettyClientPublicExecutor_3
乐乐Java路漫漫
关注
  • 1
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
rocketmq python 一个进程订阅多个topic_rocketmq 问题汇总-一个consumerGroup只对应一个topic...
weixin_39800112的博客
12-11 1719
1同一个订阅组内不同Consumer实例订阅不同topic消费混乱问题调查图1：背景说明：如图1左半部分，假设目前的关系如下：broker： 两个，broker_a和broker_btopic：两个，topic1和topic2，每个topic在每个broker上分为4个queueconsumer：两个，consumer1和consumer2，都属于group1，分属于不同的jvm运行。默认情况下...
Kafka vs RocketMQ—— Topic数量对单机性能的影响
weixin_34168880的博客
04-08 757
引言 上一期我们对比了三类消息产品(Kafka、RabbitMQ、RocketMQ)单纯发送小消息的性能，受到了程序猿们的广泛关注，其中大家对这种单纯的发送场景感到并不过瘾，因为没有任何一个网站的业务只有发送消息。本期，我们就来模拟一个真实的场景： 消息的发送和订阅一定是共存的 要支持多个订阅端订阅自己感兴趣的消息 鉴于上一期Kafka和Rocket...
Kafka vs RocketMQ——多Topic对性能稳定性的影响-转自阿里中间件
weixin_34357962的博客
12-19 434
引言 上期我们对比了RocketMQ和Kafka在多Topic场景下，收发消息的对比测试，RocketMQ表现稳定，而Kafka的TPS在64个Topic时可以保持13万，到了128个Topic就跌至0.85万，导致无法完成测试。我们不禁要问： 为什么看不到Kafka性能暴跌的趋势呢？ 今天的测试，就来排查一下这个问题，然后验证一下两个系统对外服务的稳定性。本次测试，要引入“稳定性测试”这个概念，...
kafka直连方式消费多个topic
Lu_Xiao_Yue的博客
11-14 1万+
一个消费者组可以消费多个topic，以前写过一篇一个消费者消费一个topic的，这次的是一个消费者组通过直连方式消费多个topic,做了小测试，结果是正确的，通过查看zookeeper的客户端，zookeeper记录了偏移量 package day04 /* 消费多个topic */ import kafka.common.TopicAndPartition import kafka.mess...
kafka java 监听_一个Spring的KafkaConsumer侦听器可以侦听多个主题吗？
weixin_33877700的博客
02-26 452
小编典典是的，只需遵循@KafkaListenerJavaDocs：/*** The topics for this listener.* The entries can be 'topic name', 'property-placeholder keys' or 'expressions'.* Expression must be resolved to the topic name.* Mu...
Kafka高频面试题系列之一（30道）
04-04
这些面试题涵盖了 Kafka 中的一些核心问题，包括消息传输的可靠性、Consumer Group 的工作原理以及系统配置对数据一致性和可用性的影响。理解和掌握这些概念对于在实际工作中有效利用 Kafka 至关重要。
java面试题_消息中间件--RocketMq(14题).zip
09-26
- **Queue**：队列，每个Topic下可以有多个队列，消息会被分发到不同的队列中。 - **Message ID**：唯一标识每条消息的ID，用于消息跟踪。 2. **RocketMQ的工作模式**： - **Push模式**：服务器主动推送消息给...
7道消息队列ActiveMQ面试题！.zip
09-26
- **Topic**：发布/订阅模式，多个消费者可以订阅同一个主题，接收到所有发布的消息。 5. **ActiveMQ的消息持久化方式有哪些？** ActiveMQ提供两种持久化方式：内存持久化和文件系统持久化。内存持久化速度快，但...
2023 RocketMQ常见面试题50道
04-04
- Consumer 端：确认消息消费（Ack），确保消息已被正确处理。 6. **Producer 端消息不丢失**： - 使用 `send()` 方法的同步版本，确保收到发送结果。 - 设置重试次数，例如 `producer....
RocketMQ精选面试题50道（含答案解析）
04-04
以下是对RocketMQ面试题的详细解答，涵盖了多个MQ的选型、MQ的作用、RocketMQ的角色及特点、Topic与JMS Queue的区别以及消息删除策略。 1. 多个MQ如何选型？ - RabbitMQ：基于Erlang开发，对消息堆积支持不足，...
SpringBoot集成Kafka（一消费组监听消费多topic主题）
whiteBearClimb的博客
11-06 7136
首先这里只是个演示案例，当普通MQ用，使用坚听消费模式，直接开整： （1）pom.xml 加依赖 <!--Spring整合Kafka--> <dependency> <groupId>org.springframework.kafka</groupId> <artifactId>spring-kafka</artifactId> </dependenc
Topic太多，RocketMQ炸了。
最新发布
Java技术攻略的博客
04-12 507
网上博客常说，kafka的topic数量过多会影响kafka，而RocketMQ不会受到topic数量影响。但是，果真如此吗？最近排查一个问题，发现RocketMQ稳定性同样受到topic数量影响！！好了，一起来回顾下这次问题排查吧，和放在最后，千万不要错过。
RocketMq踩坑
眼神多像云朵
02-27 1655
provider 默认情况下不需要设置instanceName，rocketmq会使用ip@pid(pid代表jvm名字)作为唯一标示 　　如果同一个jvm中，不同的producer需要往不同的rocketmq集群发送消息，需要设置不同的instanceName 原因如下：如果不设置instanceName，那么会使用ip@pid作为producer唯一标识，那么会导致多个producer内部只有一个MQClientInstance(与mq交互)实例，从而导致只往一个集群发消息。 consumer 默认情况
Kafka：Consumer订阅
kaven
02-14 2531
测试代码 pom.xml： <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apac
RocketMQ-核心篇(2)-核心概念
TianXinCoord的博客
05-15 7896
文章目录一、消息模型（Message Model）二、消息生产者（Producer）三、消息消费者（Consumer）四、主题（Topic）五、代理服务器（Broker Server）六、名字服务（Name Server）七、拉取式消费（Pull Consumer）八、推动式消费（Push Consumer）九、生产者组（Producer Group）十、消费者组（Consumer Group）十一、集群消费（Clustering）十二、广播消费（Broadcasting）十三、普通顺序消息（Normal
kafka
weixin_39910711的博客
06-24 2352
6个步骤，全方位掌握 Kafka： 终于有人把 kafka 原理说清楚了！：https://www.bilibili.com/read/cv8517619/ 原来这才是 Kafka！（多图+深入）：https://www.jianshu.com/p/fabfcce24ae8
kafka消费者多个topic配置
热门推荐
澹若水的专栏
04-30 2万+
我们的项目是springboot集成kafka的，配置文件在application.yml里如下： #kafka配置 kafka: consumer: bootstrap: maxPollRecords: 1000 enableAutoCommit: true autoCommitIntervalMs: 100 sessionTimeoutMs: ...
Kafka概念-架构
qq_43590904的博客
10-01 394
Kafka概念-架构 目录 消息队列的好处 消息队列模式 什么是 Kafka Kafka整体架构及解析 消息队列的好处 解耦 允许你独立的扩展或修改两边的处理过程，只要确保它们遵守同样的接口约束。 可恢复性 系统的一部分组件失效时，不会影响到整个系统。消息队列降低了进程间的耦合度，所 以即使一个处理消息的进程挂掉，加入队列中的消息仍然可以在系统恢复后被处理。(注意消息重复消费) 缓冲 有助于控制和优化数据流经过系统的速度,解决生产者和消费者处理消息能力不一致的问题 灵活性 &
RocketMQ实战（1）springBoot整合RabbitMQ
qq_33449307的博客
10-15 839
RocketMQ实战（1）springBoot整合RabbitMQ 官网地址 相关概念 1.引入maven依赖 <dependency> <groupId>org.apache.rocketmq</groupId> <artifactId>rocketmq-client</artifactId> <version>4.7.1</version> </

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值