Presto RBO之ReorderJoins

一. 前言

        在Presto中，ReorderJoins 的优化规则是指遍历Join表的各种顺序和类型的组合，在所有的组合中找到一个执行代价最小的执行计划来执行。ReorderJoins 是Join操作最重要的优化规则，本文主要介绍在Presto中，ReorderJoins 是如何实现的。

二. ReorderJoins的实现

    Presto列举Join的所有组合主要用了分治+递归的方式进行遍历，主要的实现过程包括：

    1. 通过generatePartitions 将所有的Join的表切成所有的两两组合：

        

 

      比如A Join B Join C， generatePartitions产生的结果是[[A], [A, B], [A, C]] ，与之对应的Join的右边的组合为[[B, C], [C], [B]] 。generatePartitions返回值包括了分治的所有组合。

     2. 逐个遍历1返回的组合，左表用1返回的组合（如上述的A），右表用与之对应的右表（如B & C），构造Join计划：

      3. 在2中构造计划的时候，如果发现左表或者右表的source个数不止1个，对左表或者右表递归代1中获取左表或者右表的最小代价的执行计划：

 

   

         比如上述的[A] join [B, C], 判断右表的[B, C] 不止1个时，再对右边的[B, C] 进行reorder，取[B partition join C]、 [B boradcast join C]、[C partition join B]、 [C boradcast join B]之间的执行代价最小的执行计划。

        4. 为了提高遍历效率，Presto在遍历的时候做了记忆化搜索。

   

      5.  返回所有执行计划组合中，代价最小的执行计划：