kafka如何只保证数据被处理切只处理一次思路
如果消费者这端要保证数据被处理且只被处理一次:
屏蔽掉了下面这3种情况:
(1)数据不被处理
(2)数据的重复处理
(3)数据的丢失
一般来说:需要手动提交偏移量,需要保证数据处理成功与保存偏移量的操作在同一事务中就可以了
详述,参考下面两篇文章
总结+翻译:https://blog.csdn.net/w1992wishes/article/details/89502956
翻译的文档:https://www.jianshu.com/p/5d889a67dcd3