mysql百万级数据分页查询优化

1、对limit分页问题的性能优化方法

当起始页较小时，查询没有性能问题，我们分别看下从10， 100， 1000，10000，400000，800000开始分页的执行时间（每页取20条）。

select * from product limit 10, 20   0.016秒
select * from product limit 100, 20   0.016秒
select * from product limit 1000, 20   0.047秒
select * from product limit 10000, 20   0.094秒
select * from product limit 400000, 20   3.229秒
select * from product limit 800000, 20   37.44秒

从上面的例子已经看出随着起始记录的增加，时间也随着增大， 这说明分页语句limit跟起始页码是有很大关系。

从中我们也能总结出两件事情：

1. limit语句的查询时间与起始记录的位置成正比

2. mysql的limit语句是很方便，但是对记录很多的表并不适合直接使用。

2、对limit分页问题的性能优化方法

利用索引查询的语句中如果只包含了那个索引列（覆盖索引），那么这种情况会查询很快。

因为利用索引查找有优化算法，且数据就在查询索引上面，节省了很多时间。另外Mysql中也有相关的索引缓存，在高并发时利用缓存效果更好。

在上述的例子中id字段是主键，那么id字段自然就包含了默认的主键索引。覆盖索引的查询效果下：

/** id>=的形式的SQL */
SELECT * FROM product WHERE ID > =(select id from product limit 800000, 1) limit 20; 0.2秒
/** 利用join的SQL */
SELECT * FROM product a JOIN (select id from product limit 800000, 20) b ON a.ID = b.id; 0.16秒