MySQL性能优化

MySQL性能优化可从如下几个方面着手

• SQL优化
• 索引优化
• 数据库(表)结构优化
• 系统配置优化
• 服务器硬件优化

SQL优化

• 开启慢查询记录日志，查找症状(很多时候都是一些慢查询拖累了整个数据库的性能)

  • 在配置文件中配置(my.cnf),配置完毕需要重启，不适合线上数据库

  #path可修改为绝对或者相对路径
  log-slow-queries=slow-log-path 
  #l查询时间超过2s记录
  long_query_time=2 
  #没有使用索引的查询记录
  log-queries-not-using-indexes
  

  • mysql命令行下配置

  sql#查看log_query_time变量的值
  show variables like "%long%";
  #如果long_query_time的值不是期望值，重新设定
  set global long_query_time=2;
  #查询 slow_query_log 和 slow_query_log_file的值
  show variables like "%slow%";
  #开启慢查询日志 on或者ON都可以，不区分大小写
  set global slow_query_log='on';
  #慢查询日志文件路径可修改
  set global slow_query_log='/data/mysql/slow.log'
  

  慢查询日志分析工具有官方的mysqldumpslow 和pt-query-digest,后者更加精确详细

• explain 分析sql的执行

  • table 查询的数据表
  • type (可能的值 const, eq_reg, ref, range, index,all)
    主键或者唯一索引一般是const，性能最好
    eq_reg 是一种范围查找，唯一索引，主键可能是此种查找
    ref常见于连接查询，一个表基于另外一个索引的查找
    range 基于索引的范围查找
    index通常是对index的扫描
    All 是表扫描
  • possible_keys 查询中可以使用的索引
  • key 查询中实际使用到的索引，为null表示没有使用索引
  • key_len 索引长度，越小越好
  • ref 显示索引的那一列被使用了，最好是一个常数
  • rows 扫描的行数
  • extra
    出现using filesort 查询需要优化(group by)，出现using temporary需要优化(order by 时容易出现)

• 掌握一些sql的优化方法
  max, count,子查询，group by，limit

索引优化

• 选择合适的列建立索引（在where中经常出现的查询条件的列应当创建索引,group by ，order by，on)
  
  
  • 索引字段越小越好
  • 离散度大的列放在联合索引的前面（离散度越大，过滤的数据越多)
    判断列的离散度可以根据select count(distinct col1), count(distinct col2) from table
• 索引优化SQL的方法
  增加索引会影响写入效率(insert,update,delete)
  删除重复和冗余的索引
  使用工具pt-duplicate-key-checker分析
  使用pt-index-usage 工具配合慢查询日志来分析不再使用的索引(注意主从库的时候无法使用此工具精确判断)

数据库(表)结构优化

• 选择合适的（列)数据类型
  
  
  • 选择可以存下数据的最小的数据类型
  • 选择尽量简单的数据类型
  • 尽可能对列加上not null（Innodb特性),给出default
  • 尽快能不使用text等大的数据类型，如果要用，尽量和其他字段分离，单独成表
• 表的范式和反范式
• 表的垂直拆分
  把原来有很多列的表拆分成多个表，降低表的宽度
  拆分原则：不经常使用的字段放在一个表,很大的字段放在一个表,常用的字段放在一个表
• 表的水平拆分
  水平拆分解决单表数据量过大的问题，水平拆分之后的每一张表结构相同
  常用拆分方法：取模，hash等
  分表带来的挑战：跨分区表数据查询；统计及后台操作。使用汇总表,前后台业务分开

系统配置的优化

• 修改/etc/sysctl.conf，优化系统网络参数
• 修改/etc/security/limits.conf 优化打开文件数量
• 硬件防火墙代替软件防火墙防止网络性能消耗
• mysql配置文件
  
  
  • innodb_buffer_pool_size
  • innodb_buffer_pool_instances
    mysql 5.5引入，默认一个
  • ... 参数不在一一列举
• 第三方工具优化mysql配置
  http://tools.percona.com/wizard

硬件优化

• cpu选择
  核数不能超过32,mysql对多核的支持并不是特别优秀
• 磁盘IO(RAID，常用RAID1+RAID0)