本文以0.10.0.1版本的kafka为例
1 下载并安装kafka# wget http://apache.fayea.com/kafka/0.10.0.1/kafka-0.10.0.1-src.tgz
# tar zxvf kafka-0.10.0.1-src.tgz
# mv kafka-0.10.0.1-src /usr/local/kafka
# cd !$
2 启动服务
运行kafka需要使用Zookeeper,所以需要先启动一个Zookeeper服务器,如果没有Zookeeper,可以使用kafka自带打包和配置好的Zookeeper# bin/zookeeper-server-start.sh config/zookeeper.properties
然后启动kafka服务# bin/kafka-server-start.sh config/server.properties &
3 新建一个topic
创建一个名为“test”的Topic,只有一个分区和一个备份:# bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test
创建好之后,可以通过以下命令查看已创建的topic信息:# bin/kafka-topics.sh --list --zookeeper localhost:2181test
除手工创建topic外,也可以配置broker,当发布一个不存在的topic时自动创建topic。
4 发送消息
Kafka提供了一个命令行工具,可以从输入文件或者命令行中读取消息并发送给Kafka集群,每一行是一条消息。运行producer,然后在控制台输入几条消息到服务器# bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test
This is a message
This is another message
5 消费消息
Kafka也提供了一个消费消息的命令行工具# bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test --from-beginning
This is a message
This is another message
更多使用说明请参考官方文档