查询topic
进入kafka目录:
bin/kafka-topics.sh --list --zookeeper localhost:2181
查询topic内容
bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic topicName --from-beginning
查看topic消费情况
进入kafka目录:
./kafka-consumer-groups.sh –describe –bootstrap-server localhost:9092 –group 分组名称
./kafka-consumer-groups.sh --describe --bootstrap-server localhost:9092 --group defaultGroup
查看消费组列表
./kafka-consumer-groups.sh --bootstrap-server localhost:9092 --list
kafka相关参数说明
auto.offset.reset
参数值有:latest (默认)、earliest、none
三者均有共同定义:
对于同一个消费者组,若已有提交的offset,则从提交的offset开始接着消费
latest(默认):对于同一个消费者组,若没有提交过offset,则只消费消费者连接topic后,新产生的数据
earliest:对于同一个消费者组,若没有提交过offset,则从头开始消费
none:对于同一个消费者组,若没有提交过offset,会抛异常