Kafka 集群元数据之Zookeeper存储介绍

Kafka 集群元数据之Zookeeper存储介绍？

在 Kafka 集群中，ZooKeeper 存储了大量的元数据，管理和协调 Kafka 的各个组件。以下是 ZooKeeper 中创建
的主要信息及其作用：

1. Broker 信息

路径：

• /brokers/ids/[broker_id]
• /brokers/topics/[topic_name]
• /brokers/seqid

作用：

• Broker 注册和发现：每个 Kafka Broker 在启动时会在 ZooKeeper 中注册自己的信息，包括 broker.id、主机名和端口号。其他组件可以通过读取这些节点来发现当前集群中的所有 Broker。
• Topic 配置管理：存储每个 Topic 的配置信息，包括 Partition 数量和副本因子等。
• 序列 ID 管理：用于生成唯一的序列 ID，确保每个 Topic 和 Partition 的唯一性。

2. Topic 和 Partition 信息

路径：

• /brokers/topics/[topic_name]/partitions/[partition_id]/state

作用：

• Partition Leader 信息：存储每个 Partition 的 Leader 和 Follower 信息，确定哪个 Broker 是当前 Partition 的 Leader。
• ISR 列表：记录当前 Partition 的 In-Sync Replica (ISR) 列表，标识哪些副本是与 Leader 同步的。

3. Controller 信息

路径