Kafka
猫不夜行
静水流深,物我两忘
展开
-
Kafka如何保证数据可靠性
Kafka的数据可靠性保证副本数据同步策略ISR机制ack应答机制故障处理:HW、LEO1. 副本数据同步策略两种副本数据同步策略(Kafka选择第二种)方案优点缺点半数以上完成同步,就发送ack延迟低选举新的leader时,容忍n台节点的故障,需要2n+1个副本全部完成同步,才发送ack选举新的leader时,容忍n台节点的故障,需要n+1个副...原创 2019-11-26 13:55:36 · 2555 阅读 · 0 评论 -
Kafka Exactly Once
Kafka一致性级别:名称设置一致性At Least Onceacks=-1保证数据不丢失,但不能保证数据不重复At Most Onceacks=0保证数据不重复,但不能保证数据不丢失Exactly Onceacks=-1 + enable.idompotence=true精准一致性,保证数据生产不丢失不重复0.11版本的Kafka引入了一项重...原创 2019-11-26 13:50:40 · 494 阅读 · 0 评论