zk在kafka集群中有何作用?

一、kafka集群实际上指的就是broker集群。

二、zk在kafka集群中的作用。

        1.集群管理

kafka是通过zk来进行分布式协调和管理的。kafka需要注册到一个zk集群中,已实现集群元数据管理和控制

        2.元数据管理

kafka集群中所有的broker信息、topic和partition的状态信息都会存储在zk节点上,当新的broker节点加入到集群或者topic和partition信息发生变化时,kafka会将这些信息存储到zk中。

        3.负责进行Leader选举

kafka中的每一个partition都会有一个Leader,zk可以负责进行Leader的选举,当一个Leader挂掉后,集群可以快速选择新的Leader并继续服务。(broker在启动时会去zk创建controller,第一个创建成功的就会被指定为控制器)

        4.协调与管理

kafka中的消费者组信息、消费者offset信息都会存储在zk中,当消费者加入或者退出一个消费者组时,zk都会负责重新分配partition给消费者,并且跟进新的offset信息。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值