RocketMQ中Topic、MessageQueue以及Broker之间到底是什么关系？

最新推荐文章于 2024-09-29 08:44:52 发布
最新推荐文章于 2024-09-29 08:44:52 发布
阅读量493 收藏
点赞数 6
分类专栏： RocketMQ 文章标签： rocketmq 数据库 java 开发语言 中间件
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_51967234/article/details/139335713
版权

比如你现在有一个Topic，我们为他指定创建了4个MessageQueue，那么我们接着来思考一下，这个Topic的数据在Broker集群中是如何分布的?

假如我们现在集群有两个master-broker一个master对应两个slave。

通过这个方法，就可以实现Topic数据的分布式存储!

Shen_Li_Java_ing
关注
专栏目录
RocketMq(七)：RocketMQ深入理解（producer生产者的工作原理？broker是如何持久化存储消息的？如何消息写入commitLog文件近乎内写性能的？dledger的raft协议）
weixin_46950473的博客
04-14 1300
前言 这周更晚了一天，这周的内容可能相对于前些章来说会稍微繁琐一些，但是依然还是干货满满，相信追剧到这里的博友，都是志同道合的老友了，这章主要进阶一波，深入理解一下rocketMQ的一些原理知识，废话不多说，开干！ 1.首先解答前期铺垫的pull和push两种消费模式的区别 之前的章节中有做过一个铺垫，这里就不多提了，简单的来讲，push和pull本质上消费模式是一样的，都是消费者机器主动发送请求到broker机器去拉取一批消息下来，那么对于这两种消费模式，应该选择哪种消费模式呢？区别在哪里的？ 1.
RocketMQ消息生产者是如何选择Broker的
m0_71777195的博客
11-25 1614
在RocketMQ中为，我们创建消息生产者时，只需要设置NameServer地址，消息就能正确地发送到对应的Broker中，那么RocketMQ消息生产者是如何找到Broker的呢？如果有多个Broker实例，那么消息发送是如何选择发送到哪个Broker的呢？
RocketMQ-介绍
Logan的博客
08-10 3660
RocketMQ概述 1、RocketMQ简介 RocketMQ是一个统一消息引擎、轻量级数据处理平台。 RocketMQ是一款阿里巴巴开源的消息中间件。2016年11月28日，阿里巴巴向 Apache 软件基金会捐赠 RocketMQ，成为 Apache 孵化项目。2017 年 9 月 25 日，Apache 宣布 RocketMQ孵化成为 Apache 顶 级项目（TLP ），成为国内首个互联网中间件在 Apache 上的顶级项目。 官网地址：http://rocketmq.apache.org 2、R
RocketMQ
真滴不可理喻的博客
07-15 1067
RocketMQ常见面试题
rocketMQ的初步认识，topic、nameServer、broker相关概念的解释
yuanchangliang的博客
07-28 9474
针对我学过kafka，然后半年过去了，基本什么概念都没，kafka的任何知识都忘了的学习状况，决定多多记录自己在学习新知识的各种见解，即使几个月以后回首望去，感觉这些知识太基础了也在所不惜。绝对不能重蹈kafka的覆辙。 在rocketMQ中，有topic、nameServer、broker三个最基本概念： 我眼里的三大最基础概念： 1、topic： 主题。每一个消息都会且只会属于某一个主题。消息和主题是属于一对一的关系，而主题和消息是属于一对多的关系。如下图，可以看到主题和消息的关系： 如上图，生产.
RocketMQ快速入门：group、topic、queue、tag等基本概念（四）
55555的博客
04-23 2965
上一节，我们说明了rocketmq中的4个核心组成以及他们之间的工作关系。但其中穿插的topic, queue等概念，如果未接触过mq的同学可能会有些迷糊，所以本节，我们重点针对rocketmq中的基本概念进行讲解，之前学习过其他mq的同学也能够形成对比。
RocketMQ —— 角色概念
Genius only means hard-working all one's life.
03-27 1075
文章目录RocketMQ —— 角色概念消息生产者（Producer）生产者组（Producer Group）消息消费者（Consumer）拉取式消费（Pull Consumer）推动式消费（Push Consumer）消费者组（Consumer Group）主题（Topic）普通顺序消息（Normal Ordered Message）严格顺序消息（Strictly Ordered Message...
rocketmq基本概念
计算机王的博客
08-02 403
rocketmq基本概念 消息模型 rocketmq由Producer、Broker、Consumer三部分组成 Producer负责发送消息 Consumer负责接收消息 Broker负责存储消息 broker对应一台服务器 每个broker可以存储多个topic的消息 每个topic的消息由多个messagequeue组成 messagequeue可以分布在不同的broker中 messagequeue是rocketmq存储数据的单位 consumergroup由多个consumer实例构成 消息
RocketMq中MessageQueue的分配
weixin_34418883的博客
02-25 7955
都知道Rocketmq中有ConsumerGroup的概念。在集群模式下，多台服务器配置相同的ConsumerGroup，能够使得每次只有一台服务器消费消息（注意，但不保证只消费一次，存在网络抖动的情况）。那么，笔者就很疑惑，Rocketmq是如何实现这个模式的？如何保证只有一台服务器消费？ 虽然答案很简单，但却是一个很好的带着问题看源码的机会。 RocketMq结构 从图中可以看到，MQ主要投...
rocketMQ学习笔记——consumer与broker的消息交互
Cia_zibo的博客
10-29 1912
rocketMQ的消费流程Consumerbroker保持拉取请求consumer的消费发起后记 Consumer 之前我们对消息队列体系中的注册中心、生产者、代理人(broker)有过初步的了解 broker启动后会将自己的信息注册进namesrv producer启动后会通过namesrv获取broker信息 消息生产后producer会将消息推送至broker broker收到消息后, 执行刷盘策略, 构建consumerQueue和indexFile 以上, 我们的消息已经存在与broker中了
阿里二面：RocketMQ 集群 Broker 挂了，会造成什么影响？
lt_xiaodou的博客
09-26 666
比如同一个订单相关的消息要发送到同一个 Broker 的同一个 MessageQueue 中的情况，如果这个 Broker 挂了，那 MessageQueueSelector 会选择其他 Broker 上的 MessageQueue 进行发送，这会影响当前这笔订单消费的顺序性。：如果主节点重启了，如果消费者会用本地保存的偏移量去主节点拉取消息，主节点会更新本地的偏移量，同时从节点也会去主节点同步偏移量，所以并不会拉取到重复消息。：在主节点系统压力较大的时候，消费者也会去从节点拉取消息。
RocketMQ nameserver、broker、生产者和消费者之间的关系
热门推荐
LinYaoGai的博客
09-07 1万+
一 nameserver 相对来说，nameserver的稳定性非常高。原因有二： 1 nameserver互相独立，彼此没有通信关系，单台nameserver挂掉，不影响其他nameserver，即使全部挂掉，也不影响业务系统使用，这点类似于dubbo的zookeeper。 2 nameserver不会有频繁的读写，所以性能开销非常小，稳定性很高。二 broker 1 与nameserve
RocketMQ架构原理和使用总结
weixin_45727359的博客
08-27 366
RocketMQ是一个分布式开放消息中间件，底层基于队列模型来实现消息收发功能。RocketMQ集群中包含4个模块：Namesrv, Broker, Producer, Consumer...
SpringBoot优雅的封装不同研发环境下（环境隔离）RocketMq自动ack和手动ack
qq_37557563的博客
08-12 950
SpringBoot优雅的封装不同研发环境下（环境隔离）RocketMq自动ack和手动ack,并提供具体示例，亲测有效
点评项目-2-完善注册登录业务
最新发布
m0_75138009的博客
09-29 484
需要处理的业务：在网页发送 /user/code 路径下的 post 请求后，我们需要检验手机号后，向合法的手机号发送一个随机生成的电话号。
Spring的热部署工具和数据库密码加盐操作
2301_77053417的博客
09-28 634
加密过程：用户输入的密码+盐值 --> 字符串1，然后使用md5对字符串1加密得到字符串2，然后字符串2+盐值 --> 字符串3，这个字符串3就是存储在数据库中的密文。背景：如果我们的密码明文存储在数据库中，要是被窃取了是非常的危险的，所以我们在数据库中存储的密码不能是明文的，需要进行加密后存储，也就是数据库中存储的是密文。解密过程：取出数据库中的盐值和用户输入的密码得到字符串1，使用md5对字符串1加密得到字符串2，然后验证字符串2和数据库中的密文即可。做好以上的步骤，你项目中的热部署就已经做好了。
k8s搭建一主三从的mysql8集群---无坑
oopxiajun博客专栏
09-27 992
对于构建基于MySQL的大规模、高性能应用来讲，需要使用水平扩展(集群)的数据库架构方式。在MySQL内建的复制功能可以实现，通过为服务器配置一个或多个备库的方式来进行数据同步。同时复制功能不仅有利于构建高性能的应用，也是高可用性、可扩展性、容灾、备份以及数据仓库等工作的基础。复制的基本原理是让一台服务器的数据与其他服务器保持同步。一台主库的数据可以同步到多台备库上，备库本身也可以被配置成另外一台服务器的主库。主库和备库之间可以有多种不同的组合方式。
rocketmq broker结构
06-07
RocketMQ 的 Broker 是消息队列的核心组件，负责消息存储、转发和过滤等功能。Broker 的结构如下： 1. Name Server：提供了服务发现和路由功能，可以帮助客户端发现 Broker 的位置和信息。 2. Broker：负责消息的存储、转发和过滤等功能，是消息队列的核心组件。 3. Message Queue：是 Broker 存储消息的基本单位，一个 Topic 可以分为多个 Message Queue。 4. Topic：是消息的逻辑概念，每个 Topic 包含多个消息，每个消息被存储在一个或多个 Message Queue 中。 5. Producer：消息生产者，将消息发送到 Broker 中。 6. Consumer：消息消费者，从 Broker 中订阅消息并进行消费。 总体来说，RocketMQ 的 Broker 是分布式的，可以横向扩展，提高消息队列系统的吞吐量和可用性。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值