- 博客(1)
- 收藏
- 关注
RSS订阅原创 Spark提交作业运行过程
背景 最近在学习Spark源码方面的知识，在这里大概了解了Spark整体的运行过程，从初始化到最终的底层运行。今天在这里进行详细的记录一下。一边以后的回顾和学习。Spark程序运行整体流程当SparkContext初始化完之后，我们通常会使用它来读取外部的数据，使之形成RDD。然后我们会经过一些列的RDD操作之后，到最后一个Action操作。从而触发了Job的提交。在Spark中RDD操作分为两种:
2016-09-11 16:33:25
1104
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人