Spark的Direct方式接收kafka消息实现WordCount
1.yarn集群开启
2.启动zookeeper集群(kafka需要)
3.启动kafka服务端、生产者和消费者端(生产者模拟往kafka灌入数据,消费者端打印数据)
3.1启动kafka服务端
3.2启动kafka生产者
3.3启动kafka消费者
4.spark官方Demo改吧改吧
找到你的spark安装目录-->spark-2.0.2-bin-hadoop2....
原创
2018-11-30 16:12:43 ·
663 阅读 ·
0 评论