MySQL(六)：性能分析

一. MySQL常见瓶颈

• CPU
  SQL中对大量数据进行比较、关联、排序、分组。
• IO
  实例内存满足不了缓存数据或排序等需要，导致产生大量物理 IO。
  查询执行效率低，扫描过多数据行。
• 锁
  不适宜的锁的设置，导致线程阻塞，性能下降。
  死锁，线程之间交叉调用资源，导致死锁，程序卡住。
• 服务器硬件的性能瓶颈
  top,free, iostat和vmstat来查看系统的性能状态

二. Explain

• 是什么？
  查看执行计划。使用EXPLAIN关键字可以模拟优化器执行SQL查询语句，从而知道MySQL是如何处理你的SQL语句的。分析你的查询语句或是表结构的性能瓶颈。
  官网介绍：https://dev.mysql.com/doc/refman/5.5/en/explain-output.html

• 能干嘛？
  表的读取顺序
  哪些索引可以使用
  数据读取操作的操作类型
  哪些索引被实际使用
  表之间的引用
  每张表有多少行被优化器查询

CREATE TABLE t1(id INT(10) AUTO_INCREMENT,content VARCHAR(100) NULL,PRIMARY KEY(id));
CREATE TABLE t2(id INT(10) AUTO_INCREMENT,content VARCHAR(100) NULL,PRIMARY KEY(id));
CREATE TABLE t3(id INT(10) AUTO_INCREMENT,content VARCHAR(100) NULL,PRIMARY KEY(id));
CREATE TABLE t4(id INT(10) AUTO_INCREMENT,content VARCHAR(100) NULL,PRIMARY KEY(id));

INSERT INTO t1(content) VALUES(CONCAT('t1_',FLOOR(1+RAND()*1000))); 
INSERT INTO t2 (content) VALUES(CONCAT('t2_',FLOOR(1+RAND()*1000)));
INSERT INTO t3(content) VALUES(CONCAT('t3_',FLOOR(1+RAND()*1000)));
INSERT INTO t4(content) VALUES(CONCAT('t4_',FLOOR(1+RAND()*1000))); 

• 怎么玩？
  Explain + SQL 语句。
  执行计划包含的信息:
  
  各字段解释：

• id
  select查询的序列号,包含一组数字，表示查询中执行select子句或操作表的顺序。
  三种情况：
  id相同，执行顺序由上至下。
  
  id不同，如果是子查询，id的序号会递增，id值越大优先级越高，越先被执行。
  
  id相同不同，同时存在。
  id如果相同，可以认为是一组，从上往下顺序执行；
  在所有组中，id值越大，优先级越高，越先执行。
  衍生表 = derived2 --> derived + 2 （2 表示由 id =2 的查询衍生出来的表。type 肯定是 all ，因为衍生的表没有建立索引）
  

• select_type
  
  查询的类型，主要是用于区别 普通查询、联合查询、子查询等的复杂查询。
  SIMPLE：简单的 select 查询,查询中不包含子查询或者UNION
  PRIMARY：查询中若包含任何复杂的子部分，最外层查询则被标记为Primary
  DERIVED：在FROM列表中包含的子查询被标记为DERIVED(衍生)。
  MySQL会递归执行这些子查询, 把结果放在临时表里。DERIVED 通过子查询查出来的临时表。
  SUBQUERY：在SELECT或WHERE列表中包含了子查询。
  DEPENDENT SUBQUERY：在SELECT或WHERE列表中包含了子查询,子查询基于外层。
  DEPENDENT SUBQUERY & SUBQUERY区别：
  DEPENDENT SUBQUERY：子查询结果为 多值
  SUBQUERY：查询结果为 单值
  UNCACHEABLE SUBQUREY：无法被缓存的子查询
  UNION：若第二个SELECT出现在UNION之后，则被标记为UNION；若UNION包含在FROM子句的子查询中,外层SELECT将被标记为：DERIVED。UNION RESULT 两个语句执行完后的结果。
  UNION RESULT：从UNION表获取结果的SELECT。

• table
  显示这一行的数据是关于哪张表的。

• type
  访问类型排列。
  
  type显示的是访问类型，是较为重要的一个指标，结果值从最好到最坏依次是：
  system > const > eq_ref > ref > fulltext > ref_or_null > index_merge > unique_subquery > index_subquery > range(尽量保证) > index > ALL
  system>const>eq_ref>ref>range>index>ALL
  一般来说，得保证查询至少达到range级别，最好能达到ref。
  system：表只有一行记录（等于系统表），这是const类型的特列，平时不会出现，这个也可以忽略不计。
  const：表示通过索引一次就找到了,const用于比较primary key或者unique索引。因为只匹配一行数据，所以很快。如将主键置于where列表中，MySQL就能将该查询转换为一个常量。
  
  eq_ref：唯一性索引扫描，对于每个索引键，表中只有一条记录与之匹配。常见于主键或唯一索引扫描。ref：非唯一性索引扫描，返回匹配某个单独值的所有行.
  本质上也是一种索引访问，它返回所有匹配某个单独值的行，然而，
  它可能会找到多个符合条件的行，所以他应该属于查找和扫描的混合体。

range：只检索给定范围的行,使用一个索引来选择行。key 列显示使用了哪个索引。一般就是在你的where语句中出现了between、<、>、in等的查询。这种范围扫描索引扫描比全表扫描要好，因为它只需要开始于索引的某一点，而结束语另一点，不用扫描全部索引。

index：Full Index Scan，index与ALL区别为index类型只遍历索引树。这通常比ALL快，因为索引文件通常比数据文件小。（也就是说虽然all和Index都是读全表，但index是从索引中读取的，而all是从硬盘中读的）
all：Full Table Scan，将遍历全表以找到匹配的行
index_merge：在查询过程中需要多个索引组合使用，通常出现在有 or 的关键字的sql中。
ref_or_null：对于某个字段既需要关联条件，也需要null值得情况下。查询优化器会选择用ref_or_null连接查询。
index_subquery：利用索引来关联子查询，不再全表扫描。
unique_subquery ：该联接类型类似于index_subquery。 子查询中的唯一索引。

• possible_keys
  显示可能应用在这张表中的索引，一个或多个。
  查询涉及到的字段上若存在索引，则该索引将被列出，但不一定被查询实际使用。

• key
  实际使用的索引。如果为NULL，则没有使用索引。
  查询中若使用了覆盖索引，则该索引和查询的select字段重叠。
  
  当查询具体某一字段时，且那个字段有索引时，key 值会显示为索引。

• key_len
  表示索引中使用的字节数，可通过该列计算查询中使用的索引的长度。在不损失精确性的情况下，长度越短越好。
  ken_len显示的值为索引字段的最大可能长度，并非实际使用长度，即ken_len是根据表定义计算所得，不是通过表内检索出的。
  

-- 如何计算？
EXPLAIN SELECT * FROM emp WHERE emp.deptno=109 AND emp.`ename`='AvDEjl'；
总结一下：
char(30) utf8 --> key_len = 30*3 +1  表示 utf8 格式需要  *3 (跟数据类型有关)   
允许为 NULL  +1  ，不允许 +0
动态类型 +2  (动态类型包括 : varchar , detail text() 截取字符窜)

key_len=deptno(int)+null + ename(varchar(20)*3+动态  =4+1+20*3+2= 67

key_len字段能够帮你检查是否充分的利用上了索引。

ref：显示索引的哪一列被使用了，如果可能的话，是一个常数。哪些列或常量被用于查找索引列上的值。

rows：显示MySQL认为它执行查询时必须检查的行数，越少越好。根据表统计信息及索引选用情况，大致估算出找到所需的记录所需要的行数。

Extra：包含不适合在其他列中显示但十分重要的额外信息。

1. Using filesort
   说明mysql会对数据使用一个外部的索引排序，而不是按照表内的索引顺序进行读取。MySQL中无法利用索引完成的排序操作称为“文件排序”。
   
   查询中排序的字段，排序字段若通过索引去访问将大大提高排序速度。
   分情况：当通过前面的查询语句 筛选大部分条件后，只剩下很少的数据。using filesort 性能影响不大，需要综合考虑。

2. Using temporary
   使用临时表保存中间结果,MySQL在对查询结果排序时使用临时表。常见于排序 order by 和分组查询 group by。
   

3. USING index
   表示相应的select操作中使用了覆盖索引(Covering Index)，避免访问了表的数据行，效率不错！
   如果同时出现using where，表明索引被用来执行索引键值的查找;
   如果没有同时出现using where，表明索引只是用来读取数据而非利用索引执行查找。
   
   覆盖索引(Covering Index)：
   
   using index condition: 查询条件中虽然出现了索引列，但是有部分条件无法使用索引，会根据能用索引的条件先搜索一遍再匹配无法使用索引的条件。

Using where：表明使用了where过滤

using join buffer：使用了连接缓存。出现在当两个连接时驱动表(被连接的表,left join 左边的表。inner join 中数据少的表) 没有索引的情况下。给驱动表建立索引可解决此问题。且 type 将改变成 ref。

impossible where：where子句的值总是false，不能用来获取任何元组。

select tables optimized away：在没有GROUP BY子句的情况下，基于索引优化MIN/MAX操作或者对于MyISAM存储引擎优化COUNT(*)操作，不必等到执行阶段再进行计算，查询执行计划生成的阶段即完成优化。
myisam 中会维护 总行数 (还有其他参数)这个参数，所以在执行查询时不会进行全表扫描。而是直接读取这个数。
但会对增删产生一定的影响。根据业务情况决定谁好谁坏
innodb 中没有这个机制。

distinct：优化distinct操作，在找到第一匹配的元组后即停止找同样值

三. 热身case