Kafka-消费,Offset手动提交,指定offset消费,指定分区消费

若文章对你有帮助请点个👍👍👍, 表示对我的鼓励, 非常感谢 ❤️❤️❤️

消费者示例

// 配置请求参数
Properties props = new Properties();
props.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG, "localhost:9092");
props.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class.getName());
props.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class.getName());
props.put(ConsumerConfig.ENABLE_AUTO_COMMIT_CONFIG, true);
props.put(ConsumerConfig.AUTO_OFFSET_RESET_CONFIG, "earliest");
properties.put(ConsumerConfig.CLIENT_ID_
  • 11
    点赞
  • 39
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
在Kafka中,可以使用seek方法来指定offset进行消费。在Consumer类中,有两个相关的方法可以实现这个功能。 引用\[1\]中的方法是seek方法的一个重写。它允许我们在下一次调用poll方法时覆盖消费者将使用的抓取偏移量。如果多次为同一个分区调用此方法,将使用最新的偏移量。需要注意的是,如果在消费过程中任意使用此方法来重置抓取偏移量,可能会导致数据丢失。因此,需要谨慎使用此方法。 引用\[2\]中的方法是seekToEnd方法。它允许我们将消费者的偏移量定位到每个给定分区的最后一个偏移量。这个方法是惰性求值的,只有在调用poll或position方法时才会真正执行。如果没有提供分区参数,它将定位到当前分配的所有分区的最后一个偏移量。需要注意的是,如果提供的TopicPartition没有被分配给该消费者,将会抛出IllegalArgumentException异常。 因此,如果想要在Kafka中指定offset进行消费,可以使用seek方法或seekToEnd方法来实现。 #### 引用[.reference_title] - *1* *2* [Kafka - 指定offset进行消费](https://blog.csdn.net/u011669700/article/details/80023160)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *3* [指定offset/指定时间消费Kafka消息](https://blog.csdn.net/lixinkuan328/article/details/120730555)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值