MySQL数据库SQL优化
一:插入数据
insert优化
- 批量插入
- 手动提交事务
- 主键顺序插入
大批量插入
如果一次需要插入大批量数据,使用insert语句插入性能较低,此时可以使用MySQL数据库提供的load指令进行插入。
#客户端连接服务端时,加上参数 --local-infile
mysql --local-infile -u root -p
#设置全局参数local_infile为1,开启从本地加载文件导入数据的开关
set global local_infile=1;
#执行load指令将准备好的数据,加载到表结构中
load data local infile '/root/sql1.log' into table tb_user fields terminated by ',' lines terminated by '\n';
二:主键优化
数据组织方式
在InnoDB存储引擎中,表数据是根据主键顺序组织存放的,这种存储方式被称为索引组织表。
表空间、段、区、页、行
页分裂
页可以为空,也可以填充100%。根据主键排序。
主键顺序插入,按照顺序插入。
主键乱序插入,会发生页分裂。
页合并
当删除一行记录时,实际上记录并没有被物理删除,只是记录被标记(flaged)为删除并且它的空间变得允许被其他记录声明使用。当页中的记录达到MERGE_THRESHOLD(默认为页的50%),InonoDB会开始寻找最靠近的页(前或后)看看是否可以将两个也合并以优化空间使用。
主键设计原则
满足业务的情况下,尽量降低主键的长度。
插入数据时,尽量选择顺序插入,选择使用AUTO_INCREMENT自增主键。
尽量不要使用UUID做主键或者是其他自然主键,如身份证号。
业务操作时,避免对主键的修改。
三:order by 优化
- Using filesort:通过表的索引或全表扫描,读取满足条件的数据行,然后在排序缓冲区sort buffer中完成排序操作,所有不是通过索引直接返回排序结果的排序都叫FileSort排序。
- Using index:通过有序索引顺序扫描直接返回有序数据,这种情况即为using index,不需要额外排序,操作效率高。
根据排序字段建立合适的索引,多字段排序时,也遵循最左前缀法则。
尽量使用覆盖索引。
多字段排序,一个升序一个降序,此时需要注意联合索引在创建时的规则。
如果不可避免的出现filesort,大数据量排序时,可以适当增大排序缓冲区大小
sort_buffer_size(默认256K)。
四:group by 优化
在分组操作时,可以通过索引来提高效率
分组操作时,索引的使用也是满足最左前缀法则的。
五:limit优化
一般分页查询时,通过创建覆盖索引,能够比较好地提高性能,可以通过覆盖索引加子查询的形式进行优化。
explain select * from tb_sku t,(
select id from tb_sku
order by id limit 2000000,10) s
where t.id=a.id;
六:count优化
MyISAM 引擎把一个表的总行数存在了磁盘上,因此执行count()的时候会直接返回这个数,效率很高。
InonoDB引擎就麻烦了,它执行count()的时候,需要把数据一行行地从引擎里面都出来,然后累积计数。
优化思路:自己计数
count()是一个聚合函数,对于返回的结果集,一行行地判断,如果count函数参数不是null,累计值就加1,最后返回累计值。
七:update优化
InnoDB的行锁是针对索引加的锁,不是针对记录加的锁,并且该索引不能失效,否则会从行锁升级为表锁。
在执行更新的时候,更新的条件一定要有索引,不然行锁会升级为表锁,降低并发性能。