高级mysql学习三、mysql性能分析

mysql性能分析

mysql query optimizer（查询优化器）

• mysql中有专门负责优化select语句的优化器模块
• 主要功能：通过计算分析系统中收集到的系统信息，为客户端请求的query提供它认为最优的执行计划（它认为最优的数据检索方式，但不见得是DBA 认为是最优的，这部分最耗费 时间）当客户端向mysql请求一条query，命令解析器模块完成请求分类，区别出是select并转发给mysql query optimizer时，mysql query optimizer首先会对整条query进行优化，处理掉一些常量表达式的预算，直接换算成常量值。并对query中的查询条件进行简化和转换，如去掉一些无用或显而易见的条件、结构调整等。然后分析query中的hint信息（如果有），看表示hint信息是否可以完全确定该query的执行计划。如果没有hint货hint信息还不足以完全确定执行计划，则会读取所涉及对象的统计信息，根据query进行写响应的计算分析，然后再得出最后的执行计划。

mysql 常见瓶颈

• CPU：CPU在饱和的时候一般发生在数据装入内存或从磁盘上读取数据时候
• IO：磁盘I/O瓶颈发生在装入数据远大于内存容量的时候
• 服务器硬件的性能瓶颈：top,free,iostat和vmstat来查看系统的性能状态

explain

怎么玩

• explain + sql语句
• 执行计划包含的信息

能干嘛

• 表的读取顺序
• 数据读取操作的操作类型
• 哪些索引可以使用
• 哪些索引被实际使用
• 表之间的引用
• 每张表有多少行被优化器查询

使用explain关键字可以模拟优化器执行sql查询语句，从而知道mysql是如何处理你的sql语句的。分析你的查询语句
或是表结构的性能瓶颈

1. id，指的是表的加载顺序的优先级，数字越大越先执行。

2. select_type – 数据读取操作的操作类型

    simple：简单的select查询，查询中不包含子查询或union 
    primary：查询中若包含任何复杂的子部份，最外层查询则被标记为（最后加载的那个）
    subquery：子查询
    derived：在from列表中包含的子查询被标记为derived（衍生），mysql会递归执行这些子查询，把结果放  在临时表 里
    union：若第二个select出现在union之后，则被标记为union，若union包含在from子句的子查询中，外层select将被标记为：derived
    union result：从union表中获取结果的select
   

3. type – 访问类型

    显示查询使用了何种类型 从最好到最差依次是： system>const>eq_ref>ref>range>index>all  
    all --全表扫描  
    system ：表只有一行记录（等于系统表），这是const类型的特例，平时不会出现，这个也可以忽略不计  
    const ：标示通过索引一次就找到了，const用于比较primary key 或者 unique索引。因为只匹配一行数据，所以很快，   如将主键至于where列表中，mysql就能将该查询转换成一个常量  
    eq_ref ：唯一性索引扫描，对于每个索引建，表中只有一条记录与之匹配。常见于主键或唯一索引扫描  
    ref ：非唯一性索引扫描，返回匹配某个单独值的所有行，本质上也是一种索引访问，它返回所有匹配某个单独值的行，然而 他可能会找到多个符合条件的行，所以他应该属于查找和扫描的混合体  
    range ：只检索给定范围的行，使用一个索引来选择行。key列显示使用了哪个索引 一般就是在你的where语句中出现了between、<、>、 in等的查询 这种范围扫描索引扫描比全表扫描要好，因为他只需要开始于索引的某一个点，结束于另一个点，不用扫描全部  
    index ： FullIndex Scan，index与ALL区别为index类型值遍历索引树。这通常比all快，因为索引文件通常比数据文件 小。也就是说虽然all和index都是读全表，但index是从索引中读取的，儿all是从因盘中读取的
   

4. possible_keys

   显示可能应用在这张表中的索引，一个或多个。
   查询涉及到的字段上若存在索引，则该索引将被列出，但不一定被查询实际使用
   

5. key

   实际使用的索引，如果为null，则没有使用索引
   查询中若使用了覆盖索引，则该索引仅出现在key列表中
   

6. key_len

   表示索引中使用的字节数，可通过该列计算查询中使用的索引的长度，在不损失精确性的情况下，长度越短越好
   key_len显示的值为索引字段的最大可能长度，并非实际使用长度，即key_len是根据表定义计算而得，不是通过表内检索的
   

7. ref

   显示索引的那一列被使用了，如果可能的话，是一个常数，那些列或常量被用于查找索引列上的值
   

8. row

   根据表统计信息及索引选用情况，大致估算出找到所需的记录所需要读取的行数
   

9. Extra

   包含不适合在其他列中显示但十分重要的额外信息
   1️⃣Using filesort 说明mysql会对数据使用一个外部的索引排序，而不是按照表中的索引顺序进行读取
   mysql中无法利用索引完成的排序操作称为“文件内排序” – 出现了很危险！
   2️⃣Using temporary 新建了一个内部临时表保存中间结果，mysql在对查询结果排序是使用临时表，常见于排序
   order by 和分组查询 group by —非常危险 基本挂了
   3️⃣Using index （好事！）表示相应的select操作中使用了覆盖索引（Covering Index），避免访问了表的数据行，
   效率不错！如果同时出现using where，表名索引被用来执行索引键值的查找；
   如果没有同时出现using where，表名索引用来读取数据而非执行查找动作。
   覆盖索引
   理解方式一：就是select的数据列只用从索引中就能够取得，不必读取数据行，mysql可以引用索引返回select列
   表中的字段，而不必根据索引再次读取数据文件，换句话锁查询列表被所建的索引覆盖
   4️⃣Using where 表明使用where过滤
   5️⃣using join buffer 使用了连接缓存
   6️⃣impossible where --where字句的值总是false，不能用来获取任何元组
   7️⃣select tables optimized away
   8️⃣distinct

【结论】

Join语句的优化
1️⃣尽可能减少join语句中的NesteLoop的循环总次数：“永远用小结果集驱动大的结果集”
2️⃣优先优化NesteLoop的内层循环：
3️⃣保证Join语句中被驱动表上Join条件字段已经被索引
4️⃣当无法保证被驱动表的Join条件字段被索引且内存资源充足的前提下，不要太吝惜JoinBuffer（连接缓存，my.cnf配置文件）的设置