Kafka 安装搭建 应用

kafka下载： http://kafka.apache.org/downloads

tar -zxvf kafka_2.11-1.1.0.tgz  -C /usr/local/

启动zookeeper

cat zookeeper.properties | grep -v '#' >> zk.properties
./bin/zookeeper-server-start.sh config/zk.properties

启动kafka

cat config/server.properties | grep -v '#' >> config/kafka1.properties
./bin/kafka-server-start.sh config/kafka1.properties

创建主题

[root@iZ2ze3wauzpc3cefc0xha7Z]/usr/local/kafka_2.11-1.1.0# ./bin/kafka-topics.sh --create --zookeeper 0.0.0.0:2181 --replication-factor 1 --partitions 1 --topic test-topic
Created topic "test-topic".

生产

[root@iZ2ze3wauzpc3cefc0xha7Z]/usr/local/kafka_2.11-1.1.0# ./bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test-topic
>test
>ha
>mi
>dd

消费

[root@iZ2ze3wauzpc3cefc0xha7Z]/usr/local/kafka_2.11-1.1.0# ./bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test-topic
hh

消费历史

[root@iZ2ze3wauzpc3cefc0xha7Z]/usr/local/kafka_2.11-1.1.0# ./bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test-topic --from-beginning
test
ha
mi
dd

zookeeper只能启动单数，比如1台 、3台、7台等等，不能偶数台

kafka 与 spring 集成参考 demo https://github.com/menxu/mxmvcdemo

错误排查

参考 https://www.tuicool.com/articles/3yQJFbr

需要配置 advertised.listeners=PLAINTEXT://xx.xx.xx.xx:9092