通过时间戳查询指定分区的offsets

最新推荐文章于 2024-08-17 17:22:58 发布

forrest_ou

最新推荐文章于 2024-08-17 17:22:58 发布

阅读量6.5k

点赞数 3

分类专栏： Kafka 文章标签： kafka offset timestamp

本文链接：https://blog.csdn.net/forrest_ou/article/details/78978575

版权

*** 使用的方法（offsetsForTimes()）：

Properties props = new Properties();
KafkaConsumer<String,String> consumer = new KafkaConsumer<>(props);
java.util.Map<TopicPartition,OffsetAndTimestamp> partitionTimestampOffsets = consumer.offsetsForTimes(java.util.Map<TopicPartition,java.lang.Long>)

long offset = partitionTimestampOffsets.get(partiton0).offset()

通过时间戳查询指定分区的offsets，前后两个时间戳就是指定的时间段，所有分区相加就是指定的主题。所以可以通过时间戳查询指定分区的offsets方法来查询指定时间段内指定主题的偏移量。结果可以用来核对生产或者同步的消息数量。

*** 完整代码如下：

public static void main(String[] args){
  String bootstrapServers = args[0];
  String topic = args[1];
  String groupId = args[2];
  String startTime = args[3];
  String endT