RocketMQ的Controller模式

目录

一、背景

二、架构

1、核心思想

2、DLedgerController 核心设计

三、日志复制

1、基本概念与流程

1.1、当⼀个 Broker 成为 Master，其会:

1.2、当一个 Broker 成为 Slave, 其会:

2、截断算法

3、复制流程

4、复制协议

四、Master 选举

1、基本流程

2、SyncStateSet 变更

3、Expand

---

一、背景

当前 RocketMQ Raft 模式主要是利用 DLedger Commitlog 替换原来的 Commitlog，使 Commitlog 拥有选举复制能力，但这也造成了一些问题：

• Raft 模式下，Broker组内副本数必须是三副本及以上，副本的ACK也必须遵循多数派协议。
• RocketMQ 存在两套 HA 复制流程，且 Raft 模式下的复制无法利用 RocketMQ 原生的存储能力。

因此我们希望利用 DLedger 实现一个基于 Raft 的一致性模块（DLedger Controller），并当作一个可选的选主组件, 支持独立部署, 也可以嵌入在 Nameserver 中，Broker 通过与 Controller 的交互完成 Master 的选举, 从而解决上述问题, 我们将该新模式称为 Controller 模式

二、架构

如图是 Controller 模式的核心架构, 介绍如下

1、核心思想

如图是 Controller 模式的核心架构, 介绍如下:

• DledgerCo