Mysql：优化

表优化

选择合适存储引擎

• myisam：应用时以读和插入操作为主，只有少量的更新和删除，并且对事务的完整性，并发性要求不是很高的

• InnoDB：事务处理，以及并发条件下要求数据的一致性除了插入和查询外，包括很多的更新和删除（InnoDB有效地降低删除和更新导致的锁定）

  对于支持事务的InnoDB类型的表来说，影响速度的主要原因是AUTOCOMMIT默认设置是打开的，而且程序没有显式调用BEGIN 开始事务，导致每插入一条都自动提交，严重影响了速度可以在执行SQL前调用begin，多条SQL形成一个事物（即使autocommit打开也可以），将大大提高性能

选择合适的数据类型

• 原则：更小通常更好，简单就好，所有字段都得有默认值，尽量避免null

  尽量使用数字型字段，若只含数值信息的字段尽量不要设计为字符型

  例如：数据库表设计时候更小的占磁盘空间尽可能使用更小的整数类型(mediumint就比int更合适)

  比如时间字段：datetime和timestamp，datetime占用8个字节，而timestamp占用4个字节，只用了一半，而timestamp表示的范围是1970—2037适合做更新时间

• 在创建表的时候，为了获得更好的性能，我们可以将表中字段的宽度设得尽可能小

  尽可能的使用varchar/nvarchar代替char/nchar，

  例如：在定义邮政编码这个字段时，如果将其设置为CHAR(255)，显然给数据库增加了不必要的空间甚至使用VARCHAR这种类型也是多余的，因为CHAR(6)就可以很好的完成任务了

  对于某些文本字段，例如“省份”或者“性别”，我们可以将它们定义为ENUM类型因为在MySQL中，ENUM类型被当作数值型数据来处理，而数值型数据被处理起来的速度要比文本类型快得多这样

• 我们应该为数据库里的每张表都设置一个ID做为其主键，并设置上自动增加的AUTO_INCREMENT标志

查询优化

• SQL语句用大写

• 使用、 标记代替1=1

• 避免在where子句中使用参数

• 最好不要使用”**“返回所有字段 ，用具体的字段列表代替“*”，不要返回用不到的任何字段

• 使用表的别名(Alias)：当在SQL语句中连接多个表时，请使用表的别名并把别名前缀于每个Column上这样一来，就可以减少解析的时间并减少那些由Column歧义引起的语法错误

• 不要有超过5个以上的表连接（JOIN），考虑使用临时表或表变量存放中间结果少用子查询，视图嵌套不要过深，一般视图嵌套不要超过2个为宜

• 尽量将数据的处理工作放在服务器上，减少网络的开销，如使用存储过程

• 尽量使用exists代替select count(1)来判断是否存在记录，count(1)比count(*)更有效率

• 当只要一行数据时使用LIMIT 1

• 选择最有效率的表名顺序（只在基于规则的优化器中有效）：

  如果有3个以上的表连接查询，那就需要选择交叉表（intersection table）作为基础表，交叉表是指那个被其他表所引用的表

• 使用“临时表”暂存中间结果 ：

  简化SQL语句的重要方法就是采用临时表暂存中间结果，但是临时表的好处远远不止这些，将临时结果暂存在临时表，后面的查询就在tempdb中了，这可以避免程序中多次扫描主表，也大大减少了程序执行中“共享锁”阻塞“更新锁”，减少了阻塞，提高了并发性能

• 避免使用临时表，除非却有需要，否则应尽量避免使用临时表，相反，可以使用表变量代替；大多数时候(99%)，表变量驻扎在内存中，因此速度比临时表更快，临时表驻扎在TempDb数据库中，因此临时表上的操作需要跨数据库通信，速度自然慢

• 一些SQL查询语句应加上nolock，读、写是会相互阻塞的，为了提高并发性能，对于一些查询，可以加上nolock，这样读的时候可以允许写，但缺点是可能读到未提交的脏数据

  使用nolock有3条原则：

  • 查询的结果用于“插、删、改”的不能加nolock；

  • 查询的表属于频繁发生页分裂的，慎用nolock ；

  • 使用临时表一样可以保存“数据前影”，起到类似Oracle的undo表空间的功能，能采用临时表提高并发性能的，不要用nolock

• 存储过程是编译好、优化过、并且被组织到一个执行规划里、且存储在数据库中的SQL语句，是控制流语言的集合，速度当然快反复执行的动态SQL，可以使用临时存储过程，该过程（临时表）被放在Tempdb中

• 最好不要使用触发器：

  • 触发一个触发器，执行一个触发器事件本身就是一个耗费资源的过程；
  • 如果能够使用约束实现的，尽量不要使用触发器；
  • 不要为不同的触发事件(Insert，Update和Delete)使用相同的触发器；
  • 不要在触发器中使用事务型代码

• 当服务器的内存够多时，配制线程数量 = 最大连接数+5，这样能发挥最大的效率；否则使用 配制线程数量<最大连接数启用SQL SERVER的线程池来解决，如果还是数量 = 最大连接数+5，严重的损害服务器的性能

• 提高GROUP BY语句的效率，可以通过将不需要的记录在GROUP BY之前过滤掉，下面两个查询返回相同结果，但第二个明显就快了许多

  低效：
  SELECT JOB , AVG(SAL) 
  FROM EMP 
  GROUP BY JOB 
  HAVING JOB =’PRESIDENT’ 
  OR JOB =’MANAGER’ 
  
  高效: 
  SELECT JOB , AVG(SAL) 
  FROM EMP 
  WHERE JOB =’PRESIDENT’ 
  OR JOB =’MANAGER’ 
  GROUP BY JOB
  

• 避免死锁，在你的存储过程和触发器中访问同一个表时总是以相同的顺序；事务应经可能地缩短，在一个事务中应尽可能减少涉及到的数据量；

• 永远不要在事务中等待用户输入

索引优化

加索引，优查询，慢查询，优索引

• 保持索引的定义和使用顺序一致性；
• 索引需要逐步优化，不要总想着一口吃成胖子；
• 将含in的范围查询，放到where条件的最后，防止索引失效
• 尽可能的使用索引字段作为查询条件，尤其是聚簇索引，必要时可以通过index index_name来强制指定索引
• 避免对大表查询时进行table scan，必要时考虑新建索引
• 在使用索引字段作为条件时，如果该索引是联合索引，那么必须使用到该索引中的第一个字段作为条件时才能保证系统使用该索引，否则该索引将不会被使用
• 要注意索引的维护，周期性重建索引，重新编译存储过程

索引创建规则：

• 表的主键、外键必须有索引

• 数据量超过300的表应该有索引

• 经常与其他表进行连接的表，在连接字段上应该建立索引

• 经常出现在Where子句中的字段，特别是大表的字段，应该建立索引

• 索引应该建在选择性高的字段上

• 索引应该建在小字段上，对于大的文本字段甚至超长字段，不要建索引

• 复合索引的建立需要进行仔细分析，尽量考虑用单字段索引代替

• 如果复合索引中包含的字段经常单独出现在Where子句中，则分解为多个单字段索引

• 如果复合索引所包含的字段超过3个，那么仔细考虑其必要性，考虑减少复合的字段

• 如果既有单字段索引，又有这几个字段上的复合索引，一般可以删除复合索引

  表上建立的每个索引都会增加存储开销，索引对于插入、删除、更新操作也会增加处理上的开销另外，过多的复合索引，在有单字段索引的情况下，一般都是没有存在价值的；相反，还会降低数据增加删除时的性能，特别是对频繁更新的表来说，负面影响更大

• 应尽可能的避免更新clustered索引数据列， 因为clustered索引数据列的顺序就是表记录的物理存储顺序，一旦该列值改变将导致整个表记录的顺序的调整，会耗费相当大的资源若应用系统需要频繁更新clustered索引数据列，那么需要考虑是否应将该索引建为clustered索引

• 索引的创建要与应用结合考虑，建议大的OLTP表不要超过6个索引

避免索引失效

• 避免全表扫描

• 索引本身失效

• 复合索引，不要跨列或无序使用（最佳左前缀）

• 符合索引，尽量使用全索引匹配

• 尽量使用覆盖索引（using index）

避免全表扫描

全表扫描会导致索引失效

• 任何对列的操作都将导致全表扫描，它包括数据库函数、计算表达式等等，查询时要尽可能将操作移至等号右边

• 强制类型转换可能导致全表扫描

• 复合索引不能使用不等于（!=或<>）或 is null（is not null）等反向查询，可能导致全表扫描，MySQL只有对以下操作符才使用索引：<，<=，=，>，>=，BETWEEN，IN，以及某些时候的LIKE

• 某些or可能导致全表扫描；可以分解成多个查询，通过UNION 连接多个查询，UNION all执行的效率更高

• in和not in可能导致全表扫描，对于连续的数值，能用between就不要用in了，在IN后面值的列表中，将出现最频繁的值放在最前面，出现得最少的放在最后面，减少判断的次数

• 左like ‘%asd’ 也将导致全表扫描，like尽量以常量开头，不要以%开头，否则索引失效；可以使用覆盖索引挽救，不用回表查询时可以触发索引

查询检查

• 使用慢查询日志去发现慢查询，使用执行计划去判断查询是否正常运行，总是去测试你的查询看看是否他们运行在最佳状态下

• 久而久之性能总会变化，避免在整个表上使用count(*)，它可能锁住整张表，使查询保持一致以便后续相似的查询可以使用查询缓存，在适当的情形下使用GROUP BY而不是DISTINCT，在WHERE、GROUP BY和ORDER BY子句中使用有索引的列，保持索引简单，不在多个索引中包含同一个列

• 有时候MySQL会使用错误的索引，对于这种情况使用USE INDEX，检查使用SQL_MODE=STRICT的问题，对于记录数小于5的索引字段，在UNION的时候使用LIMIT不是是用OR

• 为了避免在更新前SELECT，使用INSERT ON DUPLICATE KEY或者INSERT IGNORE，不要用UPDATE去实现，不要使用MAX，使用索引字段和ORDER BY子句，LIMIT M，N实际上可以减缓查询在某些情况下，有节制地使用，在WHERE子句中使用UNION代替子查询，在重新启动的MySQL，记得来温习你的数据库，以确保数据在内存和查询速度快，考虑持久连接，而不是多个连接，以减少开销

• 基准查询，包括使用服务器上的负载，有时一个简单的查询可以影响其他查询，当负载增加在服务器上，使用SHOW PROCESSLIST查看慢的和有问题的查询，在开发环境中产生的镜像数据中测试的所有可疑的查询

• 查询缓冲并不自动处理空格，因此，在写SQL语句时，应尽量减少空格的使用，尤其是在SQL首和尾的空格（因为查询缓冲并不自动截取首尾空格）

• 在所有的存储过程和触发器的开始处设置SET NOCOUNT ON，在结束时设置SET NOCOUNT OFF无需在执行存储过程和触发器的每个语句后向客户端发送DONE_IN_PROC消息

• MySQL查询可以启用高速查询缓存这是提高数据库性能的有效MySQL优，方法之一当同一个查询被执行多次时，从缓存中提取数据和直接从数据库中返回数据快很多

• EXPLAIN SELECT查询用来跟踪查看查询效果

  EXPLAIN关键字可以展示：

  • MySQL处理SQL语句过程，帮忙分析查询语句或是表结构的性能瓶颈

  • 索引主键被如何利用的，你的数据表是如何被搜索和排序的

持续更新中。。。