Kafka什么情况下一个 Broker 会从ISR中踢出去?

本文详细解释了在ApacheKafka中,In-SyncReplicas(ISR)集合的作用,以及导致副本被移出ISR的情况,如滞后、网络问题、Broker故障、磁盘空间不足和心跳机制。副本需满足同步条件才能重新加入ISR。
摘要由CSDN通过智能技术生成

在 Apache Kafka 中,ISR(In-Sync Replicas)集合是指与分区 Leader 副本保持同步的所有副本的集合。一个 Broker 上托管的副本如果从 ISR 集合中移除(即“踢出去”),通常是因为以下情况之一:

  1. 副本滞后

    • 如果某个副本落后于 Leader 的消息太多,超过了配置的 replica.lag.time.max.ms 参数值,那么这个副本就会被踢出 ISR。这个参数定义了副本可以落后Leader多久还能被认为是同步状态。
  2. 网络延迟或中断

    • 当Broker之间的网络连接出现问题时,Follower副本可能无法及时接收到Leader的更新,从而导致它无法与Leader保持同步。
  3. Broker宕机

    • 如果Broker节点发生故障或主动关闭,其上托管的所有副本都会自动离开ISR集合,因为它们不再能接收和处理新的消息。
  4. 磁盘空间不足

    • 如果Broker上的磁盘空间不足,无法写入新的日志记录,相关副本也会被踢出ISR,以防止进一步的数据丢失风险。
  5. 长时间未发送心跳

    • Kafka 通过心跳机制来检测副本是否还活跃并保持同步。如果Follower副本在一段时间内(由replica.lag.time.max.ms参数影响)没有向Leader发送心跳,则Leader会认为该副本已失效,并将其从ISR中移除。

总之,只要Follower副本不能及时地、完整地复制Leader的所有数据,或者由于其他原因导致无法维持同步状态,都有可能被从ISR集合中剔除。只有当这些副本重新追上Leader并满足同步条件后,才能重新加入到ISR集合中。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值