java代码实现kafka消费端consumer的from-beginning功能

最新推荐文章于 2024-11-11 15:10:04 发布

java_doom

最新推荐文章于 2024-11-11 15:10:04 发布

阅读量5.1k

点赞数 1

分类专栏： kafka 文章标签： java 大数据

这篇博客详细介绍了如何使用Java代码配置Kafka消费者，使其能够从消息队列的开始位置读取消息，从而实现完整的从头开始消费的流程。

摘要由CSDN通过智能技术生成

只需要在代码中加入

props.put("auto.offset.reset", "earliest");
props.put("group.id", UUID.randomUUID().toString());

完整例子

//1、准备配置文件
	    Properties props = new Properties();
	    props.put("bootstrap.servers", "hadoop1:9092");
	    props.put("acks", "all");
	    props.put("retries", 0);
	    props.put("batch.size", 16384);
	    props.put("linger.ms", 1);
	    props.put("buffer.memory", 33554432);
	    
	    props.put("group.id", "test");
	    props.put("enable.auto.commit", "true");
	    props.put("auto.commit.interval.ms", "1000");
	    props.put("key.deserializer", "org.apache.kafka.common.serializatio