mysql尾页查询_mysql 大表分页查询 翻页 优化方案

mysql分页查询是先查询出来offset+limit行数据，然后放弃前offset，取limit条记录，造成了越往后的页数，查询时间越长

一般优化思路是转换offset，让offset尽可能的小，最好能每次查询都是第一页，也就是offset为0

查询按id排序的情况

一、如果查询是根据id排序的，并且id是连续的

这种网上介绍比较多，根据要查的页数直接算出来id的范围

比如offset=40, limit=10, 表示查询第5页数据，那么第5页开始的id是41，增加查询条件：id>40  limit 10

二、如果查询是根据id排序的，但是id不是连续的

通常翻页页数跳转都不会很大，那我们可以根据上一次查询的记录，算出来下一次分页查询对应的新的 offset和 limit，也就是离上一次查询记录的offset

分页查询一般会有两个参数：offset和limit，limit一般是固定，假设limit=10

那为了优化offset太大的情况，每次查询需要提供两个额外的参数

参数lastEndId： 上一次查询的最后一条记录的id

参数lastEndOffset： 上一次查询的最后一条记录对应的offset，也就是上一次查询的offset+limit

第一种情况(与第二种其实是一样)：跳转到下一页，增加查询条件：id>lastEndId limit 10

第二种情况：往下翻页，跳转到下任意页，算出新的newOffset=offset-lastEndOffset,增加查询条件：id>lastEndId offset newOffset limit 10，但是如果newOffset也还是很大，比如，直接从第一页跳转到最后一页，这时候我们可以根据id逆序(如果原来id是正序的换成倒序，如果是倒序就换成正序)查询，根据总数量算出逆序查询对应的offset和limit，那么 newOffset = totalCount - offset - limit， 查询条件：id=totalCount ，也就是算出来的newOffset 可能小于0, 所以最后一页的newOffset=0，limit = totalCount - offset

第三种情况：往上翻页，跳转到上任意页，根据id逆序 ,newOffset = lastEndOffset- offset - limit-1， 查询条件：id

补充的按id排序的后端实现代码，前端和第三种类似，就不补充了

/**

* 如果是根据id排序的分页，根据上一次查询的记录的id优化分页查询

*

* @see 将会自动添加id排序

* @param lastEndId

* 上一次查询的最后一条记录的id

* @param lastEndOffset

* 上一次查询的最后一条记录对应的偏移量 offset+limit

**/

public Page page(QueryBuilder queryBuilder, Integer lastEndId, Integer lastEndOffset, int offset, int limit) {

FromBuilder fromBuilder = queryBuilder.from(getModelClass());

Page page = new Page<>();

int count = dao.count(fromBuilder);