Kafka实战经验 - Kafka Consumer自定义offset管理
在项目中,大部分情况下,使用Kafka自动管理offset能够满足需求,但是在某些情况下需要使用手动管理Kafka offset,比如必须要求数据处理完成以后才能commit,确保partition的数据被处理完。因此可以使用kafka的ConsumerRebalanceListener进行处理:
1) Subscribe
consumer.subscribe(topics,
原创
2017-02-18 14:24:05 ·
9304 阅读 ·
0 评论