kafka命令行操作
使用kafka的前提是安装zookeeper,请确认安装了zookeeper。
zookeeper管理命令
启动zookeeper
bin/zkServer.sh start (默认以zoo.cfg文件启动)
bin/zkServer.sh start conf/zoo.cfg
查看状态
bin/zkServer.sh status
重新启动
bin/zkServer.sh restart
停止zookeeper
bin/zkServer.sh stop
kafka命令行操作
启动
bin/kafka-server-start.sh config/server.properties
//可以使用-daemon参数,表示以守护线程的方式启动,日志不打印到控制台
bin/kafka-server-start.sh -daemon config/server.properties
关闭
bin/kafka-server-stop.sh
topic系列(2181是zookeeper的端口)
查看当前所有topic
bin/kafka-topics.sh --list --zookeeper hadoop102:2181
新建topic
bin/kafka-topics.sh --create --zookeeper hadoop102:2181 --topic xxx--partitions 1--replication-factor 1
删除topic
bin/kafka-topics.sh --delete --zookeeper hadoop102:2181 --topic xxx
详情topic
bin/kafka-topics.sh --describe --topic xxx--zookeeper hadoop102:2181
增加topic分区数目
bin/kafka-topics.sh --alter --zookeeper hadoop102:2181 --topic xxx--partitions 3
查看topic某分区偏移量最大(小)值offset
bin/kafka-run-class.sh kafka.tools.GetOffsetShell --topic xxx--time -1 --broker-list hadoop102:9092 --partitions 0
// time为-1时表示最大值,time为-2时表示最小值
生产者系列(9092是kafka的端口)
启动生产者,生产消息
bin/kafka-console-producer.sh --topic xxx--broker-list hadoop102:9092
消费者系列
启动消费者,消费消息
bin/kafka-console-consumer.sh --bootstrap-server hadoop102:9092 --topic xxx --from-beginning
查看所有消费者组
bin/kafka-consumer-groups.sh --list --bootstrap-server hadoop102:9092
查看消费者组消费情况
bin/kafka-consumer-groups.sh --bootstrap-server hadoop102:9092 --group xxx --describe