kafka 分组消费topic_关于kafka更改消费者对应分组下的offset值

1.如何辨别你启用的consumer的offset保存位置

进入zookeeper的命令行当中 zkCli.sh localhost:2181 用 ls / 查看目录

如果你在代码中定义的group id 没有在 /consumers 这个文件夹中，代表offset保存在broker的topic中

前提是consumer确实已经创建并启动

如果group ID 在/consumers 目录下存在则 offset的保存位置是 /consumers/{group}/offsets/{topic}/{partition}

反之 offset的保存位置则是 /broker/topic/__consumer_offsets 当中

2.如何查看自己消费者分组 对应的 topic 的offset

第一种方式

bin/kafka-run-class.sh kafka.tools.ConsumerOffsetChecker --topic test-topic --zookeeper zookeeper:2181 --group group名字

第二种方式

kafka-consumer-offset-checker --zookeeper localhost :2181/kafka --group test-consumer-group --topic test

第三种方式

bin/kafka-run-class.sh kafka.tools.ConsumerOffsetChecker --topic test --zookeeper 10.0.10.10:2181 --group test-consumer-group

第四种方式

bin/kafka-consumer-groups.sh --bootstrap-server dbnode4:9092,dbnode5:9092,dbnode6:9092 --group test-consumer-gro