kafka入门,Kafka 副本(十三)

Kafka通过副本提高数据可靠性,通常设置2个副本以确保生产环境的数据安全。副本分为Leader和Follower,生产者只发送数据到Leader,Follower与其同步。ISR是与Leader保持同步的Follower集合,而OSR是同步延迟的副本。Controller负责集群的Leader选举,该过程依赖Zookeeper。
摘要由CSDN通过智能技术生成

Kafka副本

副本基本信息

1)Kafka副本作用,提高数据可靠性
2)Kafka默认副本1个,生产环境一般配置2个,保证数据可靠性,太多副本会增加磁盘存储空间,增加网络上数据传输,降低效率
3)Kafka中副本份为:Leader和Follower,kafka生产者只会把数据发往Leader,然后Follower找Leader进行同步数据
4)Kafka分区中的所有副本统称为AR
AR=ISR+OSR
ISR,表示和Leader保持同步的集合Follower集合。如果Follower长时间未向Leader发送通信请求和同步数据,则该Follower将被踢出ISR,该事件阈值由replica.lag.time.max.ms参数设定,默认30s,leader发送故障之后,就会从ISR中选举新的leader
OSR,表示Follower与Leader副本同步时,延迟过多的副本

Leader选举流程

kafka集群中有一个broker的Controller会被选举为Controller Leader,复制管理集群broker的上下线,所有topic的分区副本分配和Leader选举等工作
controller的信息同步工作是依赖于Zookeeper的。
在这里插入图片描述

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值