7、索引优化分析

最新推荐文章于 2023-05-09 16:52:44 发布
最新推荐文章于 2023-05-09 16:52:44 发布
阅读量315 收藏
点赞数
分类专栏： MySQL 文章标签： 数据库 mysql sql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_44704799/article/details/126833586
版权

7、索引优化分析

7.1、索引优化器（MySql Query Optimizer）

  • MySQL中有专门负责优化SELECT语句的优化器模块，主要功能：通过计算分析系统中收集到的统计信息，为客户端请求的Query提供他认为最优的执行计划（他认为最优的数据检索方式，但不见得是DBA认为是最优的，这部分最耗费时间）

  • 当客户端向MySQL 请求一条Query，命令解析器模块完成请求分类，区别出是 SELECT 并转发给MySQL Query Optimizer时，MySQL Query Optimizer 首先会对整条Query进行优化，处理掉一些常量表达式的预算，直接换算成常量值。并对 Query 中的查询条件进行简化和转换，如去掉一些无用或显而易见的条件、结构调整等。然后分析 Query 中的 Hint 信息（如果有），看显示Hint信息是否可以完全确定该Query 的执行计划。如果没有 Hint 或Hint 信息还不足以完全确定执行计划，则会读取所涉及对象的统计信息，根据 Query 进行些相应的计算分析，然后再得出最后的执行计划。

7.2、Explain

7.2.1、介绍

  • 使用 EXPLAIN 关键字可以模拟优化器执行 SQL 查询语句，从而知道 MySQL 是 如何处理你的 SQL 语句的。分析你的查询语句或是表结构的性能瓶颈；

  • 使用 EXPLAIN 关键字可以帮我们分析：

    • 表的读取顺序
    • 数据读取操作的操作类型
    • 哪些索引可以使用
    • 哪些索引被实际使用
    • 表之间的引用
    • 每张表有多少行被优化器查询

7.2.2、使用方法

Explain + SQL语句

在这里插入图片描述

返回数据介绍
ColumnJSON NameMeaning
idselect_id表示查询中执行 select 子句或操作表的顺序：
id 相同由上到下执行，id 不同由大到小执行
select_typeNone查询的类型，主要是用于区别 普通查询、联合查询、子查询等的复杂查询
tabletable_name显示这一行的数据是关于哪张表的
partitionspartitions代表分区表中的命中情况，非分区表，该项为null
typeaccess_type访问类型排列：用于区分 SQL 的执行优劣，是较为重要的一个指标
possible_keyspossible_keys显示可能应用在这张表中的索引，一个或多个。
keykey实际使用的索引。如果为NULL，则没有使用索引
key_lenkey_lengthkey_len 表示索引使用的字节数，值越大越好
refref显示将哪些列或常量与键列中命名的索引进行比较，以从表中选择行。
rowsrowsrows 列显示 MySQL 认为它执行查询时必须检查的行数。值越小越好
filteredfiltered这个字段表示存储引擎返回的数据在 server 层过滤后，
剩下多少满足查询的记录数量的比例，注意是百分比
ExtraNone包含不适合在其他列中显示,但十分重要的额外信息

7.2.3、EXPLAIN 返回各字段解释

建表语句
 CREATE TABLE t1(id INT(10) AUTO_INCREMENT,content  VARCHAR(100) NULL ,  PRIMARY KEY (id));
 CREATE TABLE t2(id INT(10) AUTO_INCREMENT,content  VARCHAR(100) NULL ,  PRIMARY KEY (id));
 CREATE TABLE t3(id INT(10) AUTO_INCREMENT,content  VARCHAR(100) NULL ,  PRIMARY KEY (id));
 CREATE TABLE t4(id INT(10) AUTO_INCREMENT,content  VARCHAR(100) NULL ,  PRIMARY KEY (id));
 
 INSERT INTO t1(content) VALUES(CONCAT('t1_',FLOOR(1+RAND()*1000))); 
 INSERT INTO t2(content) VALUES(CONCAT('t2_',FLOOR(1+RAND()*1000)));  
 INSERT INTO t3(content) VALUES(CONCAT('t3_',FLOOR(1+RAND()*1000)));    
 INSERT INTO t4(content) VALUES(CONCAT('t4_',FLOOR(1+RAND()*1000)));
id 查询的序列号

select 查询的序列号,包含一组数字，表示查询中执行 select 子句或操作表的顺序；

有三种情况：

  • id 相同，执行顺序由上至下
  • id 不同，如果是子查询，id 的序号会递增，id 值越大优先级越高，越先被执行；
  • id 相同，不同，同时存在;
    • id 相同的，可以认为是一组，从上往下顺序执行；
    • 在所有组中，id 值越大，优先级越高，越先执行;
    • 关注点：id 号每个号码，表示一趟独立的查询；
    • 一个 sql 的查询趟数越少越好；
select * from t1,t2,t3;

在这里插入图片描述

explain select t1.id from t1 where t1.id = (select t2.id from t2 where t2.id = (select t3.id from t3 where t3.content='t3_897'));

在这里插入图片描述

select_type 查询的类型
valuemeaning
SIMPLE简单的 select 查询,查询中不包含子查询或者 union
PRIMARY查询中若包含任何复杂的子部分，最外层查询则被标记为 primary
SUBQUERY在 select 或 where 列表中包含了子查询
DEPENDENT SUBQUERY在 select 或 where 列表中包含了子查询,子查询基于外层
UNCACHEABLE SUBQUREY表示这个 subquery 的查询要受到外部系统变量的影响
UNION若第二个 select 出现在 union 之后，则被标记为 union； 若 union 包含在 from 子句的子查询中,外层 select 将被标记为：DERIVED
UNION RESULT从 union 表获取结果的 select
  1. SIMPLE：简单的 select 查询,查询中不包含子查询或者 union

在这里插入图片描述

  1. PRIMARY：查询中若包含任何复杂的子部分，最外层查询则被标记为 primary

在这里插入图片描述

  1. SUBQUERY：在 select 或 where 列表中包含了子查询

在这里插入图片描述

  1. DEPENDENT SUBQUERY：在 select 或 where 列表中包含了子查询,子查询基于外层

在这里插入图片描述

  1. UNCACHEABLE SUBQUREY：表示这个 subquery 的查询要受到外部系统变量的影响

在这里插入图片描述

  1. UNION：若第二个 select 出现在 union 之后，则被标记为 union； 若 union 包含在 from 子句的子查询中,外层 select 将被标记为：DERIVED

在这里插入图片描述

  1. UNION RESULT：从 union 表获取结果的 select

在这里插入图片描述

type 访问类型

type 显示的是访问类型，是较为重要的一个指标，结果值从最好到最坏依次是：

  • system > const > eq_ref > ref > fulltext > ref_or_null > index_merge > unique_subquery > index_subquery > range > index > ALL

我们着重看下面几个级别：

  • system > const > eq_ref > ref > range > index > ALL

一般来说，得保证查询至少达到 range 级别，最好能达到 ref。

  1. system：表仅有一行记录，必须是系统表，这是 const 类型的特例，查询起来非常迅速。

在这里插入图片描述

  1. const：表示通过索引一次就找到了,const 用于 primary key 或者 unique 索引。

    因为只匹配一行数据，所以很快 如将主键置于 where 列表中，MySQL 就能将该查询转换为一个常量

在这里插入图片描述

  1. eq_ref：唯一性索引扫描，对于每个索引键，表中只有一条记录与之匹配。常见主键或唯一索引扫描

在这里插入图片描述

  1. ref：非唯一性索引扫描，返回匹配某个单独值的所有行. 本质上也是一种索引访问，它返回所有匹配某个单独值的行，然而，它可能会找到多个符合条件的行，所以他应该属于查找和扫描的混合体

在这里插入图片描述

  1. range：只检索给定范围的行,使用一个索引来选择行。

    key 列显示使用了哪个索引 一般就是在你的where语句中出现了between、<、>、in等的查询 这种范围索引扫描比全表扫描要好，因为它只需要开始于索引的某一点，而结束语另一点，不用扫描全部索引。

在这里插入图片描述

  1. index：出现 index 是 sql 使用了索引但是没用通过索引进行过滤，一般是使用了覆盖索引或者是利用索引进行了排序分组

    Full Index Scan，index 与 all 区别为 index 类型只遍历索引树。

在这里插入图片描述

  1. all：Full Table Scan，将遍历全表以找到匹配的行

在这里插入图片描述

key_len 表示索引使用的字节数

okey_len 表示索引使用的字节数，根据这个值可以判断索引的使用情况，特别是在组合索引的时候，判断该索引有多少部分被使用到非常重要。值越大越好。

在这里插入图片描述

key_len 的计算方式：

  • varchr(10)变长字段且允许NULL = 10 * ( character set：utf8=3, gbk=2, latin1=1) + 1(NULL) + 2(变长字段)
    varchr(10)变长字段且不允许NULL = 10 * ( character set：utf8=3, gbk=2, latin1=1) + 2(变长字段)
    char(10) 固定字段且允许NULL = 10 * ( character set：utf8=3, gbk=2, latin1=1) + 1(NULL)
    char(10) 固定字段且不允许NULL = 10 * ( character set：utf8=3, gbk=2, latin1=1)

在这里插入图片描述

ref

显示将哪些列或常量与键列中命名的索引进行比较，以从表中选择行。

Extra 其他重要信息
  1. Using filesort：order by 没有用上索引。

在这里插入图片描述

优化后（给 deptno 和 ename 字段建立复合索引），去掉 filesort：

在这里插入图片描述

  • 查询中排序的字段，排序字段若通过索引去访问将大大提高排序速度
  • 说明mysql会对数据使用一个外部的索引排序，而不是按照表内的索引顺序进行读取。 MySQL中无法利用索引完成的排序操作称为“文件排序”
  1. Using temporary：分组没有用上索引。产生临时表。注意：分组操作是需要先排序后分组的。所以，也会出现 Using filesort。

优化前存在 using temporary 和 using filesort

在这里插入图片描述

优化后（给 deptno 和 ename 建立复合索引）去掉 using temporary 和 using filesort，性能发生明显变化：

在这里插入图片描述

使用了临时表保存中间结果,MySQL在对查询结果排序时使用临时表。常见于排序order by 和分组查询group by。

  1. Using index：表示使用了覆盖索引[content 是一个索引]
    在这里插入图片描述

如果同时出现using where，表明索引被用来执行索引键值的查找;
在这里插入图片描述

如果没有同时出现using where，表明索引用来读取数据而非执行查找动作。

  1. Using where：表示使用了 where 过滤

  2. using join buffer：如果有它则表明关联字段没有使用索引，使用了连接缓存

在这里插入图片描述

  1. impossible where：where 后面筛选条件有错误！

在这里插入图片描述

后端阿一
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
mssql索引优化工具
06-06
数据库优化工具，连接后选择数据库会自动在大的表添加索引
可索引谓词，索引，优化器
weixin_33725272的博客
12-02 194
一次sql优化的机会，被where条件，索引，优化器这三者的决定关系混淆，借助这个问题整理如下： 1.概念 不可索引谓词，比如&lt;&gt; 可索引谓词,比如C1=5,in条也是可索引谓词，而or条件就是不可索引谓词 匹配到索引列的谓词称为匹配谓词 可索引谓词是匹配谓词的前提 不可索引谓词可以用做筛选谓词   复合索引:主索引列+从索引列，主索引列很关系，如果where条...
索引优化
black210的博客
05-14 328
索引优化 概述 性能下降SQL 慢，执行时间长，等待时间长 数据过多（单表500w）：分库分表 关联太多的表，太多 join：SQL 优化 没有充分利用索引：索引建立 服务器调优及各个参数设置：调整 my.cnf 索引 索引是帮助MySQL高效获取的数据结构。 MySQL的 BTree 索引使用的是B树中的 B+Tree。 B树和B+树的区别 B- 树的关键字和记录是放在一起的，叶子节点可以看作外部节点，不包含任何信息； B+ 树的非叶子节点中只有关键字和指向下一个节点的索引，记录只放在叶
mysql 索引优化器_Mysql高效索引之explain模拟优化器
weixin_42309311的博客
02-02 350
高效索引使用索引的理由由于mysql在默认情况下，表中的数据记录是没有顺序可言的，也就是说在数据检索过程中，符合条件的数据存储在哪里，我们是完全不知情的，如果使用select语句进行查询，数据库会从第一条记录开始检索，即使找到第一条符合条件的数据，数据库的搜索也并不会因此而停止，毕竟符合条件的数据可能并不止一条，也就是说此时检索会把表中的数据全部检索一遍才结束，这样的检索方式也称为全表扫描。但假设...
MYSQL索引优化
阿昊的博客
03-26 127
一，索引的优点 1，大大减少了服务器需要扫描的数据量 2，帮助服务器避免排序和临时表 3，将随机IO编程顺序IO 二，索引的用处 1，快速查找匹配WHERE子句的行； 2，从consideration中消除行，可以在多个索引之间进行选择，mysql通常会使用找到最少行的索引； 3，如果表具有多列索引，则优化器可以使用索引的任何左前缀来查找行； 4，当表连接时，从其他表检索行数据； 5，查找特定索引列的min或max值； 6，如果排序或分组时可用索引的最左前缀上完成的，则对表进..
MySQL 索引分析和优化
09-11
正确地选择索引类型是索引优化的关键。不同的索引类型适合不同的应用场景。例如，在查询中频繁使用的列上创建索引可以提高查询性能。 ### Optimizing Index Creation 索引的创建需要消耗资源，因此需要合理地创建...
浅谈MySQL索引优化分析
09-09
MySQL索引优化分析是数据库管理员和开发人员必须掌握的关键技能，因为它直接影响到数据库的查询性能和整体效率。在MySQL中，索引是一种特殊的数据结构，用于加速数据检索。当正确地设计和使用时，索引能够显著提高...
MySQL高级知识-查询与索引优化分析
02-25
下面是替代方法leftjoin+union(可去除重复数据)+rightjoin实现如下面代码7、A的独有+B的独有MySQL官方对索引的定义为：索引（Index）是帮助MySQL高效获取数据的数据结构。你可以简单理解为“排好序的快速查找结构”...
MySQL索引优化的实际案例分析
12-15
Order by desc/asc limit M是我在mysql sql优化中经常遇到的一种场景，其优化原理也非常的简单，就是利用索引的有序性，优化器沿着索引的顺序扫描，在扫描到符合条件的M行数据后，停止扫描；看起来非常的简单，但是...
Mongodb索引的优化
09-10
7. **平衡索引大小与查询性能**：虽然索引可以提高查询速度，但也会占用额外的存储空间，并且插入、更新和删除操作需要维护索引，可能导致性能下降。因此，合理规划索引数量和大小至关重要。 8. **索引重建**：随着...
【MySQL】MySQL 优化器选择索引
keeper42的博客
04-04 732
学习于极客时间--MySQL 优化器选择索引的目的 优化器选择索引的目的，是找到一个最优的执行方案，并用最小的代价去执行语句。在数据库里面，扫描行数是影响执行代价的因素之一。扫描的行数越少，意味着访问磁盘数据的次数越少，消耗的 CPU 资源越少。 当然，扫描行数并不是唯一的判断标准，优化器还会结合是否使用临时表、是否排序等因素进行综合判断。 其中，扫描行数是如何判断的呢？ MySQL 在真正开始执行语句之前，并不能精确地知道满足这个条件的记录有多少条，而只能根据统计信息来估算记录数。 这个统计信
mysql之优化器选择索引
qq_41820066的博客
10-08 881
mysql之优化器选择索引
mysql优化索引
yu_haisheng的博客
04-25 217
索引的本质 MySQL官方对索引的定义为：索引是帮助MySQL高效获取数据的数据结构。 数据库查询是数据库的最主要功能之一。我们都希望查询数据的速度尽可能的快，因此 数据库系统的设计者会从查询算法的角度进行优化。最基本的查询算法是顺序查找（liner search），这种复杂度为o(n)的算法在数据量大时，速度很慢。但是我们有更优秀的查找算法，例如二分查找（binary search）、二叉...
【MySQL】深入理解MySQL索引优化器原理（MySQL专栏启动）
小明的Java问道之路
11-08 8550
本文将解读MySQL数据库查询优化器（CBO）的工作原理。简单介绍了MySQL Server的组成，MySQL优化器选择索引额原理以及SQL成本分析，最后通过 select 查询总结整个查询过程。
mysql 和索引优化
weixin_44039415的博客
05-09 179
16.并不是所有索引对查询都有效，SQL是根据表中数据来进行查询优化的，当索引列有大量数据重复时，SQL查询可能不会去利用索引，如一表中有字段sex，male、female几乎各一半，那么即使在sex上建了索引也对查询效率起不了作用。说明：MySQL并不是跳过offset行，而是取offset+N行，然后返回放弃前offset行，返回N行，那当offset特别大的时候，效率就非常的低下，要么控制返回的总页数，要么对超过特定阈值的页数进行SQL改写。not in则不走索引；如：where c>?
MySQL 优化器针对索引的算法
net.wei的博客
07-23 404
优化器针对索引的算法 自优化能力： 3.1 MySQL索引的自优化-AHI（自适应HASH索引）MySQL的InnoDB引擎，能够创建只有Btree。AHI作用： 自动评估"热"的内存索引page,生成HASH索引表。帮助InnoDB快速读取索引页。加快索引读取的所读。相当与索引的索引。 3.2 MySQL索引的自优化-Change buffer比如insert，update，delete 数据。...
《MySQL实战45讲》——学习笔记10 “优化器如何选索引、选错索引“
娜娜米的博客
10-30 880
10 | MySQL为什么有时候会选错索引？
【MySQL】深入理解MySQL索引优化器工作原理
Huangjiazhen711的博客
11-09 864
MySQL优化器认为，如果一段SQL需要创建一个基于磁盘的临时表，那么此时的成本是最大的，是基于内存的临时表的20倍。在查询字段 SUB_ODR_ID 中，理论上可以使用三个相关的索引：UNQ_LOG_SUBODR_ID、IDX_SUB_ID，MySQL优化器如何从这三个索引中进行选择？查看各成本的值，MySQL优化器的工作原理，我们执行下面这行SQL语句，分析执行过程，MySQL 索引选择是基于 SQL 执行成本。CPU成本，表示计算成本，例如索引键值的比较、记录值的比较和结果集的排序。
《MySQL学习》 MySQL优化器选择如何选择索引
纸上得来终觉浅，绝知此事要躬行
02-19 1183
最初的SQL语句因为b不用排序，又有limit 1，从5w里只要找到一条就可以返回了，如果选择a，因为要排序，就要扫完1000条，然后才能排序，这成本明显太大，所以选择了b。但如果是limit 100，选择b，虽然不用排序，但找到第一条记录后，还要向后查询，看后面有没有满足条件的100个记录，从5w中找100个的成本就大于从1000找100个的成本了，所以选择a。要求按照b,a排序，无论选择b索引还是a索引，都只需要再将另外一个字段排序（个人认为索引b已经对b排好序，再对a排序；干扰order by判断。
MySQL索引优化explain分析
最新发布
08-13
MySQL的`EXPLAIN`语句可以帮助我们分析查询语句的执行计划，从而优化查询性能。下面是一些常见的优化指标和相关的...以上是一些常见的MySQL索引优化方法，具体的优化策略需要根据具体的查询语句和数据情况进行调整。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值