kafka
会编程的海贼王
这个作者很懒,什么都没留下…
展开
-
大数据学习之 Flume + kafka + SparkStreaming
1.搭建Kafka 环境: 可参考 https://blog.csdn.net/weixin_37835915/article/details/103786157 (1)启动zookeeper (2)启动kafka (3)创建topic (4)启动Consumer 2. 搭建Flume 环境: http://www.apache.org/dyn/closer.lua/flum...原创 2020-01-14 16:03:09 · 217 阅读 · 0 评论 -
大数据学习之 spark写入数据到kafka中
目录 1. kafka 环境的搭建请参考: 2. 准备KafkaSink 3.实现代码: 4 总结: 1. kafka 环境的搭建请参考: https://blog.csdn.net/weixin_37835915/article/details/103786157 2. 准备KafkaSink package com.spark.self import java.ut...原创 2020-01-02 15:58:11 · 1245 阅读 · 0 评论 -
大数据学习之 使用SparkStreaming实时消费kafka数据
目录 第一步:准备zookeeper环境 第二步:准备kafka环境 第三步:开发代码 第四步:启动SparkStreaming 程序 第五步:生产数据,如下所示: 总结: 第一步:准备zookeeper环境 (1)下载 zookeeper-3.4.14.tar.gz ,解压,把conf 文件夹下面的 zoo.templet.cfg 改成zoo.cfg (2)启动zooke...原创 2019-12-31 17:25:09 · 906 阅读 · 0 评论