所有操作都要cd
到/export/servers/kafka_2.11-1.0.0
安装包下操作
-
bin目录
bin目录下有很多shell文件,可以根据需要进行操作
-
Topic命令概览
可以先看一下关于topic的操作
-
创建Topic
创建一个名为test的Topic,有三个分区、两个副本
bin/kafka-topics.sh --create --zookeeper node01:2181 --replication-factor 2 --partitions 3 --topic test
-
查看Topic
bin/kafka-topics.sh --list --zookeeper node01:2181,node02:2181,node03:2181
-
描述Topic
bin/kafka-topics.sh --describe --zookeeper node01:2181 --topic test
-
Producer生产数据
bin/kafka-console-producer.sh --broker-list node01:9092,node02:9092,node03:9092 --topic test
--broker-list
和--topic
都是必写命令 -
Consumer消费数据
bin/kafka-console-consumer.sh --from-beginning --topic test --zookeeper node01:2181,node02:2181,node03:2181
会提示 Using the ConsoleConsumer with old consumer is deprecated and will be removed in a future major release. Consider using the new consumer by passing [bootstrap-server] instead of [zookeeper].
也就是说用-bootstrap-server
代替zookeeper
更好 -
增加topic分区数
bin/kafka-topics.sh --zookeeper node01:2181 --alter --topic test --partitons 4
-
增加配置
bin/kafka-topics.sh --zookeeper node01:2181 --alter --topic test --config flush.messages=1
-
删除配置
bin/kafka-topics.sh --zookeeper node01:2181 --alter --topic test --delete-config flush.messages
-
删除Topic
bin/kafka-topics.sh --zookeeper node01:2181 --delete --topic test