kafka命令

1、生产者操作：
kafka-console-producer.sh --broker-list node1:9092 --topic my-kafka-topic //my-kafka-topic时topic的名字
2、消费者操作：
kafka-console-consumer.sh --bootstrap-server node1:9092 --topic my-kafka-topic
#通过以上命令，可以看到消费者可以接收生产者发送的消息
2.1 指定消费者id
kafka-console-consumer.sh --bootstrap-server node1:9092 --topic my-kafka-topic --group groupId
3、如果需要从头开始接收数据，需要添加–from-beginning参数
kafka-console-consumer.sh --bootstrap-server node01:9092 --from-beginning --topic my-kafka-topic
4、创建topic
kafka-topics.sh --create --zookeeper node1:2181 --replication-factor 1 --partitions 1 --topic my-kafka-topic
5、查看topic列表
kafka-topics.sh --list --zookeeper node01:2181
6、如果需要查看topic的详细信息，需要使用describe命令
kafka-topics.sh --describe --zookeeper node1:2181 --topic test-topic
7、若不指定topic，则查看所有topic的信息
kafka-topics.sh --describe --zookeeper node1:2181
8、删除topic
kafka-topics.sh --delete --zookeeper node1:2181 --topic my-kafka-topic
9、查看消费组为的情况 defaultConsumerGroup
./kafka-consumer-groups.sh --bootstrap-server node:9092 --group defaultConsumerGroup --describe
9.1、查看所有的消费者id情况
./kafka-consumer-groups.sh --bootstrap-server node:9092 --list
kafka 分区，当消费者大分区数的时候，会有多余的消费者处于空闲状态，所以可以以多线程的形式进行消费，生产者生产速度远大于消费者的问题（具体解决）
10、 为指定topic指定消费id偏移offset到最后
./bin/kafka-consumer-groups.sh --bootstrap-server kafka:9092 --group admissionsSyncDataTest1 --reset-offsets --topic open_user_topic --to-latest --execute
11、kafka后台启动命令
./kafka-server-start.sh -daemon …/config/server.properties