kafka常用命令

0.查看有哪些主题： ./kafka-topics.sh --list --zookeeper 192.168.0.201:12181



1.查看topic的详细信息
./kafka-topics.sh -zookeeper 127.0.0.1:2181 -describe -topic testKJ1


2、为topic增加副本
./kafka-reassign-partitions.sh -zookeeper 127.0.0.1:2181 -reassignment-json-file json/partitions-to-move.json -execute


3、创建topic
./kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic testKJ1


4、为topic增加partition
./bin/kafka-topics.sh –zookeeper 127.0.0.1:2181 –alter –partitions 20 –topic testKJ1


5、kafka生产者客户端命令
./kafka-console-producer.sh --broker-list localhost:9092 --topic testKJ1


6、kafka消费者客户端命令
./kafka-console-consumer.sh -zookeeper localhost:2181 --from-beginning --topic testKJ1


7、kafka服务启动
./kafka-server-start.sh -daemon ../config/server.properties


8、下线broker
./kafka-run-class.sh kafka.admin.ShutdownBroker --zookeeper 127.0.0.1:2181 --broker #brokerId# --num.retries 3 --retry.interval.ms 60
shutdown broker


9、删除topic
./kafka-run-class.sh kafka.admin.DeleteTopicCommand --topic testKJ1 --zookeeper 127.0.0.1:2181
./kafka-topics.sh --zookeeper localhost:2181 --delete --topic testKJ1


10、查看consumer组内消费的offset
./kafka-run-class.sh kafka.tools.ConsumerOffsetChecker --zookeeper localhost:2181 --group test --topic testKJ1
 ./kafka-consumer-offset-checker.sh --zookeeper 192.168.0.201:12181 --group group1 --topic group1



删除topic的方法

两种方法：

 

一、修改配置文件server.properties

    添加如下配置：

        delete.topic.enable=true

 

说明：官方给的文档说明“Enables delete topic. Delete topic through the admin tool will have no effect if this config is turned off”，意思就是说如果想删除topic，此项配置必须为true，默认为false。配置完重启kafka、zookeeper。

 

二、如果不想修改配置，也可以彻底删除topic

 

1、删除kafka存储目录（server.propertiewenjian log.dirs配置，默认为“/tmp/kafka-logs”）下对应的topic。(不同broker下存储的topic不一定相同，所有broker都要看一下)

2、进入zookeeper客户端删掉对应topic

        zkCli.sh  -server 127.0.0.1:42182

   找到topic目录

        ls   /brokers/topics

   删掉对应topic

    rmr  /brokers/topic/topic-name

   找到目录

        ls    /config/topics

   删掉对应topic

        rmr  /config/topics/topic-name  

 

以上两步全部执行才算彻底删除topic