- 博客(8)
- 收藏
- 关注
RSS订阅转载 Spark Streaming（7）：SparkStreaming从Flume poll数据案例实战和内幕源码解密
本期内容：1.Spark Streaming on polling from Flume实战2.Spark Streaming on polling from Flume源码FlumeConnection:分布式...
2016-04-30 13:51:11
132
转载 Spark Streaming（8）：Spark Streaming on Kafka解析和安装实战
本课分2部分讲解：第一部分，讲解Kafka的概念、架构和用例场景；第二部分，讲解Kafka的安装和实战。由于时间关系，今天的课程只讲到如何用官网的例子验证Kafka的安装是否成功。后续课程会接着讲解如何集成S...
2016-04-30 12:59:36
131
转载 Spark Streaming（6）： Flume推送数据到SparkStreaming案例实战和内幕源码解密
本期内容：1. Flume on HDFS案例回顾2. Flume推送数据到Spark Streaming实战3. 原理绘图剖析1. Flume on HDFS案例回顾上节课要求大家自己安装...
2016-04-22 23:45:21
134
转载 Spark Streaming（5）：SparkStreaming数据源Flume实际案例分享
一、什么是Flume? Flume 作为 cloudera 开发的实时日志收集系统，受到了业界的认可与广泛应用。Flume 初始的发行版本目前被统称为 Flume OG（original generation），属...
2016-04-22 23:04:56
165
转载 Spark Streaming（4）：基于HDFS的SparkStreaming案例实战和内幕源码解密
一：准备开发环境 1. 启动HDFS，如下图所示： 通过web端查看节点正常启动，如下图所示： 2. 启动Spark集群，如下图所示： 通过web端查看集群启动正常，如下图所示...
2016-04-22 22:58:32
121
转载 Spark Streaming（3）：图解StreamingContext、DStream、Receiver并结合源码分析
本课分成四部分讲解， 第一部分对StreamingContext功能及源码剖析； 第二部分对DStream功能及源码剖析； 第三部分对Receiver功能及源码剖析； 最后一部分将StreamingContext...
2016-04-22 22:41:57
128
转载 Spark Streaming（2）：Scala和Java二种方式实战Spark Streaming开发
一、Java方式开发1、开发前准备：假定您以搭建好了Spark集群。2、开发环境采用eclipse maven工程，需要添加Spark Streaming依赖。3、Spark streaming 基于Spark ...
2016-04-22 22:25:37
161
转载 Spark Streaming（1）：案例动手实战并在电光石火间理解其工作原理
本期内容： 1、Spark Streaming 动手实战演示 2、闪电般理解Spark Streaming原理 案例动手实战并在电光石火间理解其工作原理 流（Stre...
2016-04-22 22:03:56
172
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人