Java-Kafka笔记

最新推荐文章于 2022-12-28 21:23:48 发布

燕云0926

最新推荐文章于 2022-12-28 21:23:48 发布

阅读量813

点赞数

文章标签： kafka java 分布式

本文链接：https://blog.csdn.net/m0_46424841/article/details/122426363

版权

Kafka的偏移量是顺序递增的自增id，通常不会重复消费。要消费已读数据，可以创建新消费者组从头开始，或者在现有组中重置偏移量来实现。

摘要由CSDN通过智能技术生成

Kafka设置偏移量

Kafka的偏移量其实是顺序递增，简单理解就是自增id，从0开始。

Kafka一般不会重复消费的，因为Kafka的broke会记录每个消费者组的消费offset，每次开启消费的时候，会从这个offset开始消费。

Kafka如何消费已经消费过的数据

办法1：开启另一个消费者组，进行消费。因为新的消费者组的offset肯定是从0开始的。

办法2：在这个消费者组中，重新设置偏移量进行消费。

还有其他的啥办法不，这个我不知道了。就先记到这里吧。

    public static void main(String[] args) {
        Properties properties = new Properties();

        properties.put("bootstrap.servers", "173.14.22.49:9092");
        properties.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
        properties.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
        //设置消费的偏移量，如果以前消费过则接着消费，如果没有就从头开始消费
        properties.put("auto.offset.reset", "earliest");
        prop