weixin_40159502的博客

原创 Kafka重复消费问题

记录一次排查kafka重复消费问题的总结，kafka版本2.11-2.2.0 kafka重复消费数据的底层诱因： 消费者消费数据过程中，offset提交之前，该线程被kill或者该消费者心跳检查机制失败导致被踢出消费者组。 消费者心跳检查失败有两种情况，一种是消费者默认的3s一次心跳（heartbeat.interval.ms=3000），10s的心跳超时（session.timeout.m...