kafka提交异常org.apache.kafka.clients.consumer.CommitFailedException

最新推荐文章于 2024-08-08 18:53:24 发布

农村外出务工男

最新推荐文章于 2024-08-08 18:53:24 发布

阅读量2.1w

点赞数 2

分类专栏： kafka 文章标签： kafka CommitFailedException

本文链接：https://blog.csdn.net/charry_a/article/details/79892107

版权

在测试kafka 0.10.1.0版本的kafkaConsumer时遇到CommitFailedException异常，原因是手动提交时因max.poll.interval.ms参数设置不当导致消费者组重新平衡。解决方案是调整max.poll.interval.ms值，确保它大于处理消息所需的最大时间，或者根据消息处理速度来设定。修改后问题得到解决。

摘要由CSDN通过智能技术生成

一、背景

kafka使用版本为0.10.1.0，今天在测试kafkaConsumer的时候，代码如下

public static void main(String[] args) {
        Properties props = new Properties();
        props.put("bootstrap.servers", "192.168.80.132:9092");
        props.put("group.id", "testId");
        props.put("enable.auto.commit", "false");
        props.put("session.timeout.ms", "10000");
        props.put("max.poll.interval.ms", "3000");
        props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
        props.put("value.deserializer","org.apache.kafka.common.serialization.StringDeserializer");
        KafkaConsumer<String, String> consumer = new KafkaConsumer<>(props);
        consumer.subscribe(Arrays.asList("kafka-topic-02"));
        try {
            while(true) {
                Con