chinsun_1的专栏

1. DStream三种类型：1) 输入的DStreams: Kafka，Socket，Flume；2) 输出的DStreams，是一个逻辑级的Action，它是SparkStreaming框架提出的，底层还是会被翻译成物理级别的Action，所谓物理级别的Action是RDD的Action；3) 中间的Transformation, 业务逻辑处理 2. 产生DStream

JobScheduler是SparkStreaming调度的核心，相当于Spark Core中高度中心的DAGScheduler。StreamingContext的start方法/** * Start the execution of the streams. * * @throws IllegalStateException if the StreamingContext i

Exactly Once, Spark Streaming 事务,

Spark Streaming在线黑名单过滤

SparkStreaming

Spark Streaming运行机制

SparkStreaming,贯通Spark Streaming流计算框架,源码

本期内容1. DStream与RDD关系彻底研究2. Streaming中RDD的生成彻底研究