大数据工具
YancyChang
每天进步一点点...
展开
-
Kafka的配置文件详细描述
在kafka/config/目录下面有3个配置文件: producer.properties consumer.properties server.properties (1).producer.properties:生产端的配置文件 #指定kafka节点列表,用于获取metadata,不必全部指定 #需要kafka的服务器地址,来获取每一个topic的分片数等元数据信息。 me...转载 2019-03-14 21:02:51 · 11316 阅读 · 0 评论 -
Kafka选举机制及数据丢失情况分析
1 首领选举 2 数据损失配置及情况分析 2.1 不完全首领选举 unclean.leader.election 只能在broker级别(实际上是在集群范围内)进行配置,它的默认值是true 。我们之前提到过,当分区首领不可用时,一个同步副本会被选为新首领。 如果在选举过程中没有丢失数据,也就是说提交的数据同时存在于所有的同步副本上,那么这个选举就是“完全”的。但如果在首领不可用时其他副本都是不...转载 2019-03-21 21:58:53 · 1322 阅读 · 0 评论