Kafka常用命令总结

Kafka常用命令总结

本文主要展示一些kafka中的常用命令，全文均以名称为"first"的topic为例进行展示

1.创建topic

[root@hadoop102 bin]$ ./kafka-topics.sh --create --topic first --bootstrap-server hadoop102:9092,hadoop103:9092,hadoop104:9092 --partitions 3 --replication-factor 3
说明：
–replication-factor 副本数不能大于broker个数

2.查看集群所有topic

[root@hadoop102 bin]$ ./kafka-topics.sh --list --bootstrap-server hadoop102:9092,hadoop103:9092,hadoop104:9092

3.查看topic的详细信息

[root@hadoop102 bin]$ ./kafka-topics.sh --describe --topic first --bootstrap-server hadoop102:9092,hadoop103:9092,hadoop104:9092

4.使用生产者脚本生产数据

[root@hadoop102 bin]$ ./kafka-console-producer.sh --topic first --broker-list hadoop102:9092,hadoop103:9092,hadoop104:9092

5.使用消费者脚本消费数据

[root@hadoop102 bin]$ ./kafka-console-consumer.sh --topic first --bootstrap-server hadoop102:9092,hadoop103:9092,hadoop104:9092 --from-beginning
说明：
–from-beginning:从topic的第一条数据开始消费

6.修改topic

[root@hadoop102 bin]$ ./kafka-topics.sh --alter --topic first --partitions 4 --bootstrap-server hadoop102:9092,hadoop103:9092,hadoop104:9092
说明：
只能增加分区，不能减少分区

7.删除topic

[root@hadoop102 bin]$ ./kafka-topics.sh --delete --topic test --bootstrap-server hadoop102:9092,hadoop103:9092,hadoop104:9092

8.查看kafka中log日志中的数据

[root@hadoop102 bin]$ ./kafka-dump-log.sh --files /opt/module/kafka/logs/first-0/00000000000000000000.log --print-data-log

说明：
在客户端使用kafka的过程中，可以直接输入kafka命令，回车后会给出相应的报错信息以及该命令所需要的参数。