kafka install

下载 http://kafka.apache.org/downloads.html

选择二进制版Binary downloads

这里我下载的版本是

• Scala 2.11  - kafka_2.11-0.9.0.0.tgz (asc, md5)

使用kafka用户

传到服务器目录 /home/kafka

解压  tar -xzf kafka_2.11-0.9.0.1.tgz 

vim config/server.properties

主要修改以下3个参数：

broker.id=0

log.dirs=/home/kafka/kafka-logs

zookeeper.connect=172.31.0.220:2181,172.31.0.223:2181,172.31.0.224:2181/kafka

bin/kafka-server-start.sh -daemon config/server.properties 

验证

创建一个topic

 bin/kafka-topics.sh --zookeeper 172.31.0.220:2181/kafka --create --topic test --partitions 4 --replication-factor 2

查看创建的topic

 bin/kafka-topics.sh --zookeeper 172.31.0.223:2181/kafka --list

创建一个消费者producer

bin/kafka-console-producer.sh --broker-list 172.31.0.224:9092 --topic test

在另一个节点创建一个消费者consumer

bin/kafka-console-consumer.sh --topic test --zookeeper 172.31.0.220:2181/kafka --from-beginning

 --from-beginning 这个参数在线上还是不要带为好