Kafka常见的命令

0.9.X之后的版本

• 查询所有的kafka

/kafka-topics.sh --list --bootstrap-server 192.168.31.203:9092

• 描述kafka其中的topic

/kafka-topics.sh --describe --bootstrap-server 192.168.31.203:9092 --topic zyj_in

• 删除其中的topic

/kafka-topics.sh --delete --bootstrap-server 192.168.31.203:9092 --topic zyj_in
delete.topic.enable=true

• 创建其中的topic

/kafka-topics.sh --create --bootstrap-server 192.168.31.203:9092 --topic zyj_in --partitions 3 --replication-factor 2

• 生产数据

kafka-console-producer.sh --broker-list 10.0.90.74:9000,10.0.90.74:9000,10.0.90.74:9000 --topic zyj_in    

• 消费数据

kafka-console-consumer.sh --bootstrap-server 10.0.90.74:9000,10.0.90.74:9000,10.0.90.74:9000 --topic zyj_in

• 查询kafka的Lag信息

kafka-consumer-groups.sh --bootstrap-server 10.0.90.74:9000,10.0.90.74:9000,10.0.90.74:9000 --describe --group zyj

• 查询kafka的lag，offset（以下方式都可以）

bin/kafka-consumer-groups.sh --bootstrap-server <Kafka broker连接信息> --describe --group <group名称>
./kafka-consumer-groups.sh --bootstrap-server 10.0.90.74:9000,10.0.90.74:9000,10.0.90.74:9000 --describe --group zyj-in

./kafka-run-class.sh kafka.admin.ConsumerGroupCommand --group zyj-in --bootstrap-server 10.0.90.74:9000,10.0.90.74:9000,10.0.90.74:9000 --describe --new-consumer

• 查询所有的用户组

./kafka-consumer-groups.sh --bootstrap-server  10.0.90.74:9000,10.0.90.74:9000,10.0.90.74:9000 --list

0.9.x之前的版本

• 查询所有的kafka

./kafka-topics.sh --list --zookeeper 10.0.90.74:2181,10.0.90.75:2181,10.0.90.76:2181

• 创建topic

kafka-topics.sh --zookeeper 10.0.90.74:2181,10.0.90.75:2181,10.0.90.76:2181 --create --replication-factor 1 --partitions 1 --topic zyj_in
kafka-topics.sh --zookeeper 10.0.90.74:2181,10.0.90.75:2181,10.0.90.76:2181 --create --replication-factor 1 --partitions 1 --topic zyj_out

• 描述kafka的分区数

/kafka-topics.sh --describe --zookeeper 10.0.90.74:2181,10.0.90.75:2181,10.0.90.76:2181 --topic zyj_in

• 删除topic

kafka-topics.sh --zookeeper 10.0.90.74:2181,10.0.90.75:2181,10.0.90.76:2181 --delete --topic first

• 生产数据

./kafka-console-producer.sh --broker-list 10.0.90.74:9000,10.0.90.74:9000,10.0.90.74:9000 --topic zyj_in

• 消费数据

./kafka-console-consumer.sh  --zookeeper 10.0.90.74:2181,10.0.90.75:2181,10.0.90.76:2181 --topic zyj_in

• 查询数据的lag ，offset

./kafka-run-class.sh kafka.tools.ConsumerOfferChecker --group zyj-in --topic zyj-in --zookeeper 10.0.90.74:2181,10.0.90.75:2181,10.0.90.76:2181