Apache Calcite HepPlanner源码学习

本文深入探讨了Apache Calcite中的HepPlanner,这是一种基于规则的查询优化器。通过分析`setRoot`、`findBestExp`和`buildFinalPlan`三个关键步骤,揭示了HepPlanner如何将关系节点树转换为有向无环图,并通过应用规则进行优化,最终构建优化后的执行计划。
摘要由CSDN通过智能技术生成

 calcite提供了两种查询优化器:

  • 基于规则的启发式优化器HepPlanner(rule-based optimizer RBO)
  • 基于代价的VolcanoPlanner(cost-based optimizer CBO)

本篇介绍HepPlanner的工作原理。在HepPlannerTest.java中添加如下代码进行源码分析:

// HepPlannerTest.java
  @Test public void testHepPlanner() {
   
    HepProgramBuilder programBuilder = HepProgram.builder();
    // 添加join中谓词下推的rule    
    programBuilder.addRuleInstance(FilterJoinRule.FilterIntoJoinRule.FILTER_ON_JOIN);
    HepPlanner planner = new HepPlanner(programBuilder.build());
    planner.setRoot(tester.convertSqlToRel("SElECT NAME FROM EMP e JOIN DEPT d ON e.DEPTNO = d.DEPTNO WHERE COMM > 1").rel);
    RelNode newRelRoot = planner.findBestExp();
    newRelRoot.toString();
  }

setRoot

首先需要设置planner root

  // HepPlanner.java
  public void setRoot(RelNode rel) {
   
    root = addRelToGraph(rel);
    dumpGraph();
  }
  // 递归将rel tree中的relnode转化成hepRelVetex, 构造dag
  private HepRelVertex addRelToGraph(
      RelNode rel) {
   
    // Check if a transformation already produced a reference
    // to an existing vertex.
    if (graph.vertexSet().contains(rel)) {
   
      return (HepRelVertex) rel;
    }

    // Recursively add children, replacing this rel's inputs
    // with corresponding child vertices.
    final List<RelNode> inputs = rel.getInputs();
    final List<RelNode> newInputs = new ArrayList<>();
    for (RelNode input1 : inputs) {
   
      HepRelVertex childVertex = addRelToGraph(input1);
      newInputs.add(childVertex);
    }
    // 当有节点修改,调用onCopyHook进行通知
    if 
以下是学习 Apache Calcite 的一些步骤和资源: 1. 了解 Apache Calcite - 了解 Apache Calcite 的基本概念和特点。可以查看 Apache Calcite 官方网站和文档,了解 Calcite 的功能和用途。 2. 学习 SQL - Apache Calcite 是一个 SQL 解析器和查询优化器,因此了解 SQL 语言的基本语法和特性是非常重要的。可以阅读 SQL 教程或书籍来学习 SQL。 3. 安装和配置 Apache Calcite - 从 Apache Calcite 的官方网站下载最新版本的 Calcite,并按照官方文档的指导进行安装和配置。 4. 编写 SQL 查询 - 编写一些简单的 SQL 查询并在 Apache Calcite 中运行它们,可以使用 Calcite 的命令行界面,也可以在 Java 应用程序中集成 Calcite。 5. 学习 Apache Calcite 的 API - 学习 Apache Calcite 的 API,并尝试使用它们来开发自己的应用程序。可以查看官方文档和示例代码来学习 Calcite 的 API。 6. 参与社区 - 加入 Apache Calcite 的邮件列表和社区,与其他开发者交流,了解 Calcite 的最新动态和发展方向。 推荐一些 Apache Calcite学习资源: - Apache Calcite 官方网站:https://calcite.apache.org/ - Apache Calcite 官方文档:https://calcite.apache.org/docs/ - Apache Calcite 示例代码:https://github.com/apache/calcite/tree/master/example - Apache Calcite 的邮件列表:https://calcite.apache.org/mailing-lists.html - SQL 教程:https://www.w3schools.com/sql/ - 《Apache Calcite: A Foundational Framework for Optimized Query Processing》一书,由 Apache Calcite 的核心开发者编写,介绍了 Apache Calcite 的设计和实现。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值