1、查询kafka版本:
find / -name \*kafka_\* | head -1 | grep -o '\kafka[^\n]*'
查询结果:
kafka_2.10-0.10.2-kafka-2.2.0.jar
2.10是scala的版本
0.10.2是Kafka的版本
2、进入Kafka安装目录,并进入bin目录:
cd /opt/cloudera/parcels/KAFKA/bin
3、查看所有的topic列表
kafka-topics --list --zookeeper cdh5:2181
4、创建topic,一个备份,6个分区
kafka-topics --create --zookeeper cdh5:2181 --replication-factor 1 --partitions 6 --topic topic_test_1
5、生产者生产数据到topic
java -jar kafka.jar cdh5:9092 topic_test_1
6、查看topic的内容
kafka-console-consumer --bootstrap-server cdh5:9092 --topic topic_test_1 --from-beginning
7、创建消费者组
kafka-console-consumer --bootstrap-server cdh5:9092 --topic topic_test_1 --group group_test_1
.
.
.
.
.
下面是我的公众号,收集了现在主流的大数据技能和架构,欢迎大家一起来学习交流。