什么是索引下推

概述

索引条件下推优化(Index Condition Pushdown (ICP) )是MySQL5.6添加的,用于优化数据查询。

  • 不使用索引条件下推优化时存储引擎通过索引检索到数据,然后返回给MySQL服务器,服务器然后判断数据是否符合条件。
  • 当使用索引条件下推优化时,如果存在某些被索引的列的判断条件时,MySQL服务器将这一部分判断条件传递给存储引擎,然后由存储引擎通过判断索引是否符合MySQL服务器传递的条件,只有当索引符合条件时才会将数据检索出来返回给MySQL服务器。索引条件下推优化可以减少存储引擎查询基础表的次数,也可以减少MySQL服务器从存储引擎接收数据的次数。

网上搜了下相关的文章不少都将Index Condition Pushdown 称为索引下推优化,我认为还是索引条件下推优化更合适一些,因为这个优化技术关键的操作就是将与索引相关的条件由MySQL服务器向下传递至存储引擎,由此减少IO次数。MySQL服务器到存储引擎是向下,传递的是与索引列相关的查询条件,所以还是索引条件下推优化更容易理解一些。

适用条件

  1. 需要整表扫描的情况。比如:range, ref, eq_ref, ref_or_null 。适用于InnoDB 引擎和 MyISAM 引擎的查询。(5.6版本不适用分区表查询,5.7版本后可以用于分区表查询)。
  2. 对于InnDB引擎只适用于二级索引,因为InnDB的聚簇索引会将整行数据读到InnDB的缓冲区,这样一来索引条件下推的主要目的减少IO次数就失去了意义。因为数据已经在内存中了,不再需要去读取了。
  3. 引用子查询的条件不能下推。
  4. 调用存储过程的条件不能下推,存储引擎无法调用位于MySQL服务器中的存储过程。
  5. 触发条件不能下推。

工作过程

既然是优化,我们要清楚优化了些什么就要了解原本是如何工作的,所以分为两部分来描述工作过程。

不使用索引条件下推优化时的查询过程

获取下一行,首先读取索引信息,然后根据索引将整行数据读取出来。
然后通过where条件判断当前数据是否符合条件,符合返回数据。


使用索引条件下推优化时的查询过程

获取下一行的索引信息。
检查索引中存储的列信息是否符合索引条件,如果符合将整行数据读取出来,如果不符合跳过读取下一行。
用剩余的判断条件,判断此行数据是否符合要求,符合要求返回数据。


EXPLAN分析
当使用explan进行分析时,如果使用了索引条件下推,Extra会显示Using index condition。并不是Using index因为并不能确定利用索引条件下推查询出的数据就是符合要求的数据,还需要通过其他的查询条件来判断。

 

图一:不使用ICP技术(过程使用数字符号标示,如①②③等)

过程解释:

①:MySQL Server发出读取数据的命令,这是在执行器中执行如下代码段,通过函数指针和handle接口调用存储引擎的索引读或全表表读。此处进行的是索引读。

if (in_first_read)
{
in_first_read= false;
error= (*qep_tab->read_first_record)(qep_tab); //设定合适的读取函数,如设定索引读函数/全表扫描函数
}
else
error= info->read_record(info);

②、③:进入存储引擎,读取索引树,在索引树上查找,把满足条件的(经过查找,红色的满足)从表记录中读出(步骤④,通常有IO),从存储引擎返回⑤标识的结果。此处,不仅要在索引行进行索引读取(通常是内存中,速度快。步骤③),还要进行进行步骤④,通常有IO。
⑥:从存储引擎返回查找到的多条元组给MySQL Server,MySQL Server在⑦得到较多的元组。
⑦--⑧:⑦到⑧依据WHERE子句条件进行过滤,得到满足条件的元组。注意在MySQL Server层得到较多元组,然后才过滤,最终得到的是少量的、符合条件的元组。

图二:使用ICP技术(过程使用数字符号标示,如①②③等)

过程解释:

①:MySQL Server发出读取数据的命令,过程同图一。
②、③:进入存储引擎,读取索引树,在索引树上查找,把满足已经下推的条件的(经过查找,红色的满足)从表记录中读出(步骤④,通常有IO),从存储引擎返回⑤标识的结果。

此处,不仅要在索引行进行索引读取(通常是内存中,速度快。步骤③),还要在③这个阶段依据下推的条件进行进行判断,不满足条件的,不去读取表中的数据,直接在索引树上进行下一个索引项的判断,直到有满足条件的,才进行步骤④,这样,较没有ICP的方式,IO量减少。
⑥:从存储引擎返回查找到的少量元组给MySQL Server,MySQL Server在⑦得到少量的元组。因此比较图一无ICP的方式,返回给MySQL Server层的即是少量的、符合条件的元组。
另外,图中的部件层次关系,不再进行解释。

示例

假设有一张people表,包含字段name、address、first_name
索引为(name,address,first_name)
然后我们执行下面的查询

SELECT * FROM person  WHERE `name` = "1" AND `address` LIKE "%222" and first_name LIKE "%222";

如果不使用索引条件下推优化的话,MySQL只能根据索引查询出name=1的所有行,然后再依次比较是否符合全部条件。

当使用了索引条件下推优化技术后,可以通过索引中存储的数据判断当前索引对应的数据是否符合条件,只有符合条件的数据才将整行数据查询出来。查看执行计划时发现extra一栏中有Using index condition信息,说明使用了索引下推。

配置

索引下推优化是默认开启的。可以通过下面的脚本控制开关

SET optimizer_switch = 'index_condition_pushdown=off'; 
SET optimizer_switch = 'index_condition_pushdown=on';

思考

索引下推优化技术其实就是充分利用了索引中的数据,尽量在查询出整行数据之前过滤掉无效的数据。

由于需要存储引擎将索引中的数据与条件进行判断,所以这个技术是基于存储引擎的,只有特定引擎可以使用。并且判断条件需要是在存储引擎这个层面可以进行的操作才可以,比如调用存储过程的条件就不可以,因为存储引擎没有调用存储过程的能力。

 

  • 54
    点赞
  • 189
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 19
    评论
### 回答1: 索引下推是一种优化技术,它可以在查询过程中尽可能地利用索引来减少扫描的数据量,从而提高查询效率。具体来说,当一个查询包含多个条件时,索引下推可以将这些条件尽可能地推到索引层级中,以减少需要扫描的数据量。这样可以避免在查询过程中扫描大量的数据块,从而提高查询效率。 ### 回答2: 索引下推MySQL数据库中的一种优化技术,它在处理SQL查询时,首先使用索引来过滤掉不符合条件的行,然后再对符合条件的行进行进一步的判断和筛选。 传统的查询方式是,MySQL会先使用索引找到符合条件的行的主键,然后再通过主键去获取完整的行数据。这种方式需要查询两次磁盘或内存,会增加IO负载和查询时间。 而索引下推则是在执行索引查找的同时,将符合条件的数据进行过滤,减少了对磁盘或内存的读取和查询次数。它可以直接对索引进行访问,然后在索引访问路径上进行条件判断,只将符合条件的行返回给查询结果。这样可以减少对数据块的读取和查询次数,提高查询效率。 索引下推技术适用于多列查询条件的情况,例如同时使用了多个WHERE子句或使用了多个列的联合索引。它可以在索引的搜索路径上对多个查询条件进行判断,将不符合条件的行直接过滤掉,只返回满足所有条件的行。 需要注意的是,索引下推并非适用于所有情况,有些查询条件较为复杂或索引选择性较低时,索引下推的效果可能并不理想。此外,索引下推只适用于查找操作,对于更新操作并不适用。 综上所述,索引下推MySQL中的一种查询优化技术,通过在索引访问路径上对查询条件进行判断,减少数据块的读取和查询次数,从而提高查询效率。 ### 回答3: 索引下推MySQL优化查询性能的一种技术,它能够通过索引提前过滤掉不符合查询条件的行,从而减少了对数据的访问量,提高了查询效率。 在传统的查询过程中,MySQL首先会根据查询条件扫描索引,找到匹配的行,然后再针对这些行到数据表中进行查找。这种方式的问题在于,对于某些情况下,索引范围的扫描可能会导致大量不符合查询条件的行被读取出来,浪费了IO资源和CPU资源。 索引下推的目的就是在扫描索引的过程中,就根据查询条件对索引进行过滤,将不符合条件的行排除掉。这样一来,在访问数据表之前,就减少了对不符合条件的行的读取,从而提高了查询效率。 索引下推的原理是在索引节点上新增一个标记位,用于标记该节点下方的所有行是否符合查询条件。当查询中存在多个索引时,MySQL会根据查询条件选择合适的索引进行索引下推,并根据索引扫描的速度和是否过滤掉大量行数的能力进行判断。 需要注意的是,索引下推并不是适用于所有情况,只有在具备一定条件下才能发挥作用。具体来说,索引下推主要适用于范围条件查询、多列条件查询等场景。同时,索引下推只在MySQL优化器认为其可行且能提高查询性能的情况下才会被使用。 总结来说,索引下推MySQL中一种优化查询性能的技术,通过在扫描索引的过程中对索引进行过滤,减少不符合查询条件的行的读取,从而提高查询效率。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 19
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

古柏树下

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值