Oracle谓词下推、谓词越界详解

---

一、Oracle谓词下推、谓词越界 - 简介

• Oracle数据库中的谓词下推和谓词越界是针对查询优化的概念。
• 在Oracle数据库中，谓词下推是一种查询优化技术，旨在通过将过滤条件推送至数据存储层来提高查询性能。它的工作原理是在查询执行过程中，尽早地对数据进行过滤，减少不必要的数据读取和处理。

谓词下推的基本思想

将过滤表达式尽可能移动至靠近数据源的位置，以使真正执行时能直接跳过无关的数据，从而加速sql的执行效率。

二、Oracle谓词下推、谓词越界 - 详解

2.1、谓词下推详解

• 谓词下推（Predicate Pushdown）： 谓词下推是指数据库在执行查询时，将过滤条件尽早应用到数据访问操作上，以减少数据读取和处理的工作量，提高查询性能。当有多个谓词条件组成一个查询语句时，数据库会分析这些条件，并决定将哪些条件下推至数据存储层进行处理，而不是在查询结果返回给用户之后再进行过滤。这样可以减少从存储层读取的数据量，加快查询速度。

2.1.1、谓词下推的过程

谓词下推的过程如下：

2.1.1.1、查询解析

• 当用户提交一个查询语句时，Oracle数据库会进行查询解析，分析查询语句的结构和谓词条件。

2.1.1.2、查询重写

• 在查询解析过程中，数据库会进行查询重写，根据查询语句的结构和谓词条件，生成一个逻辑查询计划。逻辑查询计划描述了数据的获取方式、连接操作、过滤条件等信息。

2.1.1.3、谓词下推

• 在生成逻辑查询计划后，数据库会根据统计信息和索引等元数据，评估每个谓词条件对查询性能的影响。然后，数据库会决定在何时何地应用这些谓词条件，以减少数据读取量。
• 通常情况下，数据库会优先选择可以利用索引的谓词条件来进行下推。如果查询涉及多个表，数据库可能会考虑将谓词条件下推到连接操作之前，以减少连接操作的数据量。

2.1.1.4、执行查询计划

• 根据生成的物理查询计划，数据库开始执行查询操作。在执行过程中，谓词下推所选取的谓词条件会被应用到数据存储层，例如索引或表中的行过滤。

通过谓词下推，数据库可以在数据存储层中进行更早的过滤，减少了不符合谓词条件的数据读取量，提高了查询性能。这种优化技术尤其在大数据集、复杂查询和高并发环境下具有重要作用。

需要注意的是，谓词下推并非针对所有类型的谓词条件都适用。某些谓词条件可能无法进行下推，因为它们可能涉及计算、函数操作或与其他表的关联等复杂操作。在这种情况下，数据库可能会选择在数据返回给用户后再进行过滤。

2.1.2、谓词下推举例

2.1.2.1、查询条件中包含索引列

如果查询条件中包含了索引列，Oracle可以将该条件下推至存储引擎，让存储引擎在磁盘上直接搜索满足该条件的数据，减少了数据的传输和处理。

2.1.2.2、列裁剪（Column Pruning）

当查询中只需要特定列的结果时，Oracle可以通过谓词下推只从存储引擎中获取需要的列的数据，而不是获取全部列的数据，从而减少了数据的传输和处理。

2.1.2.3、过滤器下推（Filter Pushdown）

当查询中包含过滤条件时，Oracle可以将该条件下推至数据源引擎或存储引擎中进行处理，以减少传输到上层查询引擎的数据量。

2.1.2.4、谓词重写（Predicate Rewriting）

当查询中包含复杂的逻辑条件时，Oracle可以对条件进行重写，将其转换为更简单的形式，以便于下推至数据源引擎或存储引擎中进行处理。

2.1.2.5、子查询下推（Subquery Pushdown）

当查询中包含子查询时，Oracle可以将子查询下推至数据源引擎或存储引擎中进行处理，以减少传输到上层查询引擎的数据量。例如，如果主查询只需要子查询返回的结果集中的一部分数据，Oracle可以在数据源引擎中对子查询进行下推计算，然后将结果返回给上层查询引擎。

2.1.2.6、连接下推（Join Pushdown）

当查询中包含连接操作时，Oracle可以将连接条件下推至数据源引擎或存储引擎中进行处理，以减少数据传输和处理量。例如，如果连接条件只涉及一个表或索引列，Oracle可以将该条件下推至数据源引擎中进行处理，然后将结果返回给上层查询引擎。

2.1.2.7、并行执行下推（Parallel Execution Pushdown）

当查询可以使用并行执行技术时，Oracle可以将并行执行的相关信息下推至数据源引擎或存储引擎中，以让数据源引擎或存储引擎自行决定是否使用并行执行方式。这样可以减少数据的传输和处理时间，提高查询性能。

2.1.2.8、谓词下推与统计信息收集的结合

Oracle可以根据统计信息对查询执行计划进行优化，并结合谓词下推技术，将查询条件下推至数据源引擎或存储引擎中进行处理。例如，当查询条件涉及到不同表的列时，Oracle可以通过统计信息收集来获取更准确的估计值，并决定如何下推查询条件以提高整体查询性能。

2.1.2.9、Oracle数据库中的10个复杂谓词下推的例子

等值连接的谓词下推：将等值连接操作的连接条件下推至数据源引擎中进行处理，以减少数据传输和处理量。

范围查询的谓词下推：将范围查询操作的查询条件下推至数据源引擎中进行处理，以减少数据传输和处理量。

聚合函数的谓词下推：将聚合函数操作的谓词条件下推至数据源引擎中进行处理，以减少数据传输和处理量。

带有排序的谓词下推：将排序操作的谓词条件下推至数据源引擎中进行处理，以减少数据传输和处理量。

多表关联的谓词下推：将多表关联操作的连接条件下推至数据源引擎中进行处理，以减少数据传输和处理量。

子查询的谓词下推：将子查询的谓词条件下推至数据源引擎中进行处理，以减少数据传输和处理量。

谓词下推与索引的结合：将谓词条件下推至使用索引的数据源引擎中进行处理，以提高查询性能。

谓词下推与分区表的结合：将谓词条件下推至分区表的指定分区中进行处理，以减少数据传输和处理量。

谓词下推与子句重写的结合：将谓词条件下推至子查询或子句重写操作中进行处理，以减少数据传输和处理量。

谓词下推与并行执行的结合：将谓词条件下推至并行执行的数据源引擎中进行处理，以提高查询性能。

这些例子展示了Oracle数据库中复杂场景下谓词下推的应用。需要注意的是，在实际应用中，谓词下推的应用需要根据具体的查询和数据环境进行调整和优化，以获得最佳的查询性能。

例如，对于以下查询语句：

SELECT * FROM employees WHERE salary > 50000 AND department_id = 10;

如果数据库能够进行谓词下推，它将先通过索引或其他方式筛选出部门ID为10的员工数据，然后再在筛选结果中进一步过滤出薪资大于50000的员工，从而减少了数据的读取量。

需要注意的是，Oracle数据库会根据统计信息和索引等信息来自动决定是否进行谓词下推，并选择最优的查询计划。但在某些情况下，人工干预可能是必要的，以确保查询性能的最大化。

总的来说，Oracle谓词下推通过将查询条件尽可能地下推至数据源引擎或存储引擎中进行处理，减少数据的传输和处理量，从而提高查询性能。这些例子只是其中的一部分，实际应用中还会根据具体的查询和数据环境做更为复杂和灵活的谓词下推操作。

2.2、谓词越界详解

• 谓词越界（Predicate Overloading）： 谓词越界是指在查询语句中使用了过多的谓词条件，使得数据库无法有效地利用索引或其他优化技术来提高查询性能。当一个查询语句中包含多个复杂的谓词条件时，这些条件可能会导致数据库无法选择最优的查询计划，从而影响查询的执行效率。

2.2.1、谓词越界产生的原因

谓词越界通常是由于以下几个原因造成的：

2.2.1.1、数据分布不均匀

• 当数据在某个列上的分布不均匀时，查询条件可能无法充分利用索引。例如，当某个列具有大量重复值或者分布极不均匀时，查询时使用索引可能无法有效地过滤数据，从而导致性能问题。

2.2.1.2、查询条件与索引的匹配度低

• 当查询条件与数据库表上的索引不匹配时，系统可能无法利用索引进行高效查询。例如，如果查询条件中使用了某个列的范围查询，但该列上的索引是单列索引，那么系统可能无法有效地利用索引，从而导致性能下降。

2.2.1.3、统计信息不准确

• Oracle数据库通过统计信息来帮助优化查询执行计划，但如果统计信息不准确或者过期，系统可能无法正确选择最优的执行计划，从而导致性能问题。因此，定期收集和更新统计信息非常重要。

2.2.2、解决“谓词越界”的方法

解决“谓词越界”的方法主要包括以下几点：

2.2.2.1、收集和更新统计信息

• 确保数据库表上的统计信息是准确和最新的，可以通过收集统计信息来帮助优化查询执行计划，提高查询性能。

2.2.2.2、适当创建索引

• 根据查询条件和数据库表的特点，创建适当的索引有助于提高查询性能。需要注意的是，不是所有的列都适合创建索引，过多或不必要的索引可能导致维护成本增加，因此需要根据实际情况进行权衡和选择。

2.2.2.3、优化查询条件

• 根据实际情况，对查询条件进行优化，使其更符合索引的使用方式。可以考虑修改查询条件、重新设计查询语句等方法来改善谓词的匹配度，从而提高查询性能。

2.2.2.4、使用Oracle提供的优化工具

• Oracle数据库提供了一些用于优化查询的工具和特性，如SQL Tuning Advisor、SQL Plan Management等，可以利用这些工具来识别和解决查询性能问题。

需要注意的是，解决“谓词越界”的方法因具体情况而异，需要结合实际业务场景和数据库配置进行综合考虑和处理。

2.2.3、谓词越界举例

例如，对于以下查询语句：

SELECT * FROM employees WHERE salary > 50000 AND department_id = 10 AND hire_date > '2022-01-01';

如果数据库无法有效利用索引来处理这些条件，可能会导致查询性能下降。在这种情况下，可以考虑重新设计查询语句，优化谓词条件的组合，或者调整索引以适应查询的需求，以提高查询性能。