Limit分页查询优化(百万级优化)

LIMIT 子句可以被用于强制 SELECT 语句返回指定的记录数。
LIMIT 接受一个或两个数字参数。
参数必须是一个整数常量。
如果给定两个参数,第一个参数指定第一个返回记录行的偏移量,第二个参数指定返回记录行的最大数目。

举例:

select * from table limit 10000,10
  1. 上边SQL语句表示从表table中拿数据,跳过10000行之后,拿10行
select * from table limit 0,10
  1. 表示从表table拿数据,跳过0行之后,拿取10行
select * from table limit 10
  1. 这条SQL跟3的效果是完全一样的,表示拿前10条数据

存在问题:

在数据量不大或者是大数据量的前几页的时候,性能还算不坏,但是大数据量页码稍微大一点性能便下降比较严重

问题分析

原因出在Limit的偏移量offset
比如limit 100000,10虽然最后只返回10条数据,但是偏移量却高达100000,数据库的操作其实是拿到100010数据,然后返回最后10条。

解决思路

我能不能跳过100000条数据然后读取10条,而不是读取100010条数据然后返回10条数据。

select * from mytbl order by id limit 100000,10 
 select * from mytbl where id >= ( select id from mytbl order by id limit 100000,1 ) limit 10 

id是主键索引,那么里层走的是索引,外层也是走的索引,所以性能大大提高

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
1. 使用索引 在MySQL中,如果WHERE条件中使用了索引列,那么limit语句的执行效率会大大提高。因此,在分页查询中,如果能使用索引来过滤数据,就能提高查询效率。例如: SELECT * FROM table WHERE index_column > 10 LIMIT 10; 2. 使用覆盖索引 覆盖索引是指在查询中,所有需要的数据都可以从索引中获取,不需要再去查询数据表。因此,使用覆盖索引可以减少查询的IO操作,提高查询效率。例如: SELECT index_column FROM table WHERE index_column > 10 LIMIT 10; 3. 使用游标 游标是在查询结果中移动的指针,可以用来遍历查询结果。在分页查询中,使用游标可以提高效率。例如: SELECT * FROM table WHERE index_column > 10 ORDER BY index_column LIMIT 10; SET @rownum:=0; SELECT * FROM ( SELECT @rownum:=@rownum+1 AS rownum, table.* FROM table WHERE index_column > 10 ORDER BY index_column ) AS t WHERE rownum > 10 LIMIT 10; 4. 使用缓存 在分页查询中,如果查询条件相同,可以使用缓存来缓存查询结果,避免重复查询。例如: SELECT SQL_CACHE * FROM table WHERE index_column > 10 LIMIT 10; 5. 避免使用子查询 在分页查询中,尽量避免使用子查询,因为子查询会增加查询的复杂度和查询时间,降低查询效率。例如: SELECT * FROM table WHERE index_column > 10 AND column IN (SELECT column FROM table2); 6. 避免使用ORDER BY 在分页查询中,尽量避免使用ORDER BY,因为排序会增加查询的复杂度和查询时间,降低查询效率。例如: SELECT * FROM table WHERE index_column > 10 ORDER BY column LIMIT 10; 7. 避免使用SELECT * 在分页查询中,尽量避免使用SELECT *,因为会查询所有列,增加查询的复杂度和查询时间,降低查询效率。应该只查询需要的列。例如: SELECT column1, column2 FROM table WHERE index_column > 10 LIMIT 10;

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值