MySQL limit 分页查询优化(千万级数据)
数据表及数据量
数据表为普通的数据表字段不多两个,数据量为千万级数据量,可以自行百度大量生产sql数据进行测试。
使用普通limit查询
select id from t order by id desc limit 8000000,10;
查询速度为 2.21秒
可以看出来查询速度还是比较慢的
使用优化的limit查询
select id from t where id <= ((select max(id) from t) - 8000000) order by id desc limit 10;
查询速度为0 秒,基本就是秒查,速度非常快。
这里需要说明一下 首先需要添加where来根据主键id去添加查询条件,得到查询max(id)也就是id的最大值然后再减去你要偏移的数(就是图中的 8000000)最终limit获取前10个
不使用order by desc排序
不使用排序则直接将id替换为需要偏移的值即可,相对于使用排序更为简单。