KafKa基础命令及小坑

基础命令
创建topic
kafka-topics.sh --create --zookeeper sun:2181 --replication-factor 2 --partitions 2 --topic test
删除topic
kafka-topics.sh --delete --zookeeper sun:2181 --topic test

查看topic列表
kafka-topics.sh --list --zookeeper sun:2181

显示某个topic的详细信息
kafka-topics.sh --describe --zookeeper sun --topic test

创建生产者
kafka-console-producer.sh --broker-list 192.168.2.111:9092 --topic test

创建消费者
kafka-console-consumer.sh --zookeeper sun:2181 --topic test --from-beginning

指定消费组
kafka-console-consumer.sh --zookeeper sun:2181 --topic test --from-beginning --consumer.config consumer.properties

查看消费组下消费者的偏移量信息
kafka-run-class.sh kafka.tools.ConsumerOffsetChecker --zookeeper sun:2181 --group groupName

增加topic分区数 为topic test 增加10个分区
kafka-topics.sh --zookeeper sun:2181 --alter --topic text --partitions 10
小坑
1.写异步发送的时候需要关闭producer流
或者使用 线程的睡眠方法 .sleep(500)
或者使用 send的.get方法

2.用eclipse运行消费者错误

log4j:WARN No appenders could be found for logger (org.apache.kafka.clients.producer.ProducerConfig).
log4j:WARN Please initialize the log4j system properly.
log4j:WARN See http://logging.apache.org/log4j/1.2/faq.html#noconfig for more info.

缺少log4j文件，加上就好了
src/main/resources 下有log4j文件