![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Spark
東方海竹
宁可失败,不能平庸
展开
-
Spark Streaming Quick Start
Spark Streaming的基本数据结构是DRDD(discretized stream),DRDD和RDD类似,但是引入了时间的概念。DRDD中三个最重要的时间变量 - windowDuration,每次处理的时间窗口大小 - slideDuration,本次处理和下一次处理之间的滑动时间间隔 - batchInterval,DRDD里面每一个RDD缓存的数据时间原创 2017-11-02 15:29:59 · 355 阅读 · 0 评论 -
Spark Quick Start
Spark Overview Spark Programming Guide Spark Core RDD编程 Pair RDD编程 文件操作 编程进阶原创 2017-11-02 16:38:56 · 710 阅读 · 0 评论 -
Running Spark
工程打包 Spark Submit 运行参数详解 集群管理器 任务管理界面 程序运行调优原创 2017-11-02 17:02:02 · 311 阅读 · 0 评论