[Hive]看懂Hive的执行计划

关于Hive执行计划简述

一般执行计划有两个部分： 
stage dependencies 各个stage之间的依赖性 
stage plan 各个stage的执行计划

一个stage并不一定是一个MR，有可能是Fetch Operator，也有可能是Move Operator。

一个MR的执行计划分为两个部分： 
Map Operator Tree MAP端的执行计划 
Reduce Operator Tree Reduce端的执行计划

一些常见的Operator： 
TableScan 读取数据，常见的属性 alias

Select Operator 选取操作 
Group By Operator 分组聚合， 常见的属性 aggregations、mode ， 当没有keys属性时只有一个分组。 
Reduce Output Operator 输出结果给Reduce , 常见的属性 sort order 
Fetch Operator 客户端获取数据 ， 常见属性 limit

常见的属性的取值及含义： 
aggregations 用在Group By Operator中 
count()计数

mode 用在Group By Operator中 
hash 待定 
mergepartial 合并部分聚合结果 
final

sort order 用于Reduce Output Operator中 
+ 正序排序 
不排序 
++按两列正序排序，如果有两列 
+- 正反排序，如果有两列 
-反向排序 
如此类推