Storm和Kafka的整合

Storm和Kafka的整合

1.将kafka作为spout，编写kafkaSpout，bolt，topology程序

2.测试

2.1.启动Zookeeper(3台)

[root@master bin]# ./zkServer.sh start

2.2.开启kafka(3台)

./bin/kafka-server-start.sh -daemon config/server.properties &

2.3.如果没有主题创建主题

./bin/kafka-topics.sh --create --zookeeper master:2181,slaver1:2181,slaver2:2181 --replication-factor 3 --partitions 3 --topic 主题名

2.4.运行storm程序

2.5.开启kafka对应主题的生产者（控制台）

./bin/kafka-console-producer.sh --broker-list master:9092, slaver1:9092, slaver2:9092 --topic 主题名

2.6.向生产者控制台输入内容，观察程序控制台