- 博客(1)
- 资源 (4)
- 收藏
- 关注
原创 Spark运行架构
基本概念: Application:用户写的spark程序Driver Program:运行app的main()函数并创建SparkContextRDD Graph:RDD是Spark的数据结构,可以通过算子进行操作(Transformation和Action)。当RDD遇到Action算子时将之前的所有算子形成有向无环图(DAG),再在spark中转化为job提交到集群执行。一个app
2015-11-28 10:40:37 765
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人