Application、Job、Stage和task 之间的关系

RDD任务切分中间分为：Application、Job、Stage和Task

1. Application：初始化一个SparkContext即生成一个Application；
2. Job：一个Action算子就会生成一个Job；
3. Stage：Stage等于宽依赖(ShuffleDependency)的个数加1；
4. Task：一个Stage阶段中，最后一个RDD的分区个数就是Task的个数。

注意：Application->Job->Stage->Task每一层都是1对n的关系。