- 博客(1)
- 资源 (1)
- 收藏
- 关注
原创 Spark SQL系列------1. Spark SQL 物理计划的Shuffle实现
Spark SQL物理计划要到Spark-core执行,需要将Spark SQL物理计划转化成RDD,并且建立RDD之间的依赖关系。这个过程可以通过如下图大概表示: 上图中绿色部分指Spark物理计划到RDD过程中数据结构的变迁过程。黄色部分表示变迁过程中,实现加工作用的数据结构。
2016-02-25 14:25:31 7543
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人