kafka2.11分布式集群部署

最近在研究学习kafka，记录一下集群模式的部署：
3台机器，分别是msater/slave1/slave2
1、部署独立的zookeeper集群并启动，使用默认端口2181，create节点kafka。
2、修改kafka的server.properties，设置broker.id（不能重复），设置zookeeper.connect=master:2181,slave1:2181,slave2:2181/kafka（kafka就是上面创建的节点）。
3、在每台机器上分别启动kafka：nohup kafka-server-start.sh config/server.properties &
4、通过日志和jps查看是否启动成功。
5、在任意一台机器上创建topic：kafka-topics.sh --create --replication-factor 1 --partitions 3 --topic test --zookeeper master:2181,slave1:2181,slave2:2181/kafka
6、生产者发送数据，在任意一台机器上运行：bin/kafka-console-producer.sh --broker-list master:9092,slave1:9092,slave2:9092 --topic test
7、消费者接收数据，在任意一台机器上运行：kafka-console-consumer.sh --topic test --zookeeper master:2181,slave1:2181,slave2:2181/kafka
8、到这里，kafka的整个流程打通。

来自 “ ITPUB博客 ” ，链接：http://blog.itpub.net/12199764/viewspace-2124398/，如需转载，请注明出处，否则将追究法律责任。

转载于:http://blog.itpub.net/12199764/viewspace-2124398/