kafka 读取历史数据_kafka查看消费数据

一、如何查看

在老版本中，使用kafka-run-class.sh 脚本进行查看。但是对于最新版本，kafka-run-class.sh 已经不能使用，必须使用另外一个脚本才行，它就是kafka-consumer-groups.sh

普通版

查看所有组

要想查询消费数据，必须要指定组。那么线上运行的kafka有哪些组呢？使用以下命令：

bin/kafka-consumer-groups.sh --bootstrap-server kafka-1.default.svc.cluster.local:9092 --list

注意：根据实际情况修改kafka的连接地址

执行输出：

...

usercenter

...

这些组在是程序代码里面定义的，比如usercenter就是一个业务模块。

查看消费情况

bin/kafka-consumer-groups.sh --describe --bootstrap-server kafka-1.default.svc.cluster.local:9092 --group usercenter

参数解释：

--describe  显示详细信息

--bootstrap-server 指定kafka连接地址

--group 指定组。

注意：--group指定的组必须存在才行！可以用上面的--list命令来查看

执行输出：

TOPIC PARTITION CURRENT-OFFSET LOG-END-OFFSET LAG CONSUMER-ID HOST CLIENT-ID

xx-pending-busin