mysql分页查询优化

最新推荐文章于 2024-10-28 17:33:56 发布
最新推荐文章于 2024-10-28 17:33:56 发布
阅读量375 收藏 2
点赞数 1
分类专栏： 数据库 文章标签： mysql 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_25385555/article/details/139453360
版权

优化分页中的偏移量

背景和问题

在数据量较大的情况下，使用 LIMIT 偏移量会导致查询效率低下。例如，获取第 101 页的数据，每页 50 条记录时，查询语句如下：

SELECT * FROM articles ORDER BY id LIMIT 50000, 50;

这种查询会读取 50050 条数据，并丢弃前 50000 条，只返回后 50 条。随着页码增大，查询的效率会显著降低。

优化思路

通过在 WHERE 子句中引入条件 WHERE id > max_id，可以避免大偏移量的问题，使得 LIMIT 的偏移量始终为 0。

-- 初始查询获取第一页
SELECT * FROM articles ORDER BY id LIMIT
最低0.47元/天 解锁文章
MySQL分页查询性能优化
Mr.xing的博客
03-14 535
select 列 from 表 limit [offset,] count;offset：表⽰偏移量，通俗点讲就是跳过多少⾏，offset可以省略，默认为0，表⽰跳过0⾏，范围：[0,+∞)。count：跳过offset⾏之后开始取数据，取count⾏记录；范围：[0,+∞)。limit中offset和count的值不能⽤表达式。//取前n⾏记录select 列 from 表 limit 0,n;//或者select 列 from 表 limit n;
MySQL系列-优化之分页查询
UFO___的博客
07-30 1080
1.分页查询之前先按索引排序 我们经常会上一些小说网站看小说，他们总是会把最近更新了的小说放在最前面，也就是第一页，而很久没更新的就放在后面了。那么这样网站是如何实现的呢？我的猜想有一张小说表，表里面一个last_update表示最后更新字段，并且对这个字段建立了索引，按last_update从大到小排序之后再按需求的页面大小进行分页。 那为什么分页查询总是要排序呢？ 由上面的例子可以看出，...
mysql分页之limit优化技巧
03-20
本文档针对mysql分页之limit慢的问题，使用联合索引在大数据量的情况下优化limit分页的性能
mysql+翻页性能,mysql 翻页优化
weixin_36484465的博客
03-17 195
mysql翻页优化对于翻页，我们通常是用select fields from table limit 100,10但是当要越翻后面的页数之后，耗时变得很长select fields from table limit 1000000,10explain select * from `user` where id >= (select id from `user` limit 1000000...
sql 中 exists和 in如何选择
znanj的博客
09-09 1028
如果外部查询是“大”和内部查询是“小”，IN是一般效率比EXISTS好。 如果外部查询是“小”和内部查询是“大”，那么EXISTS是相当有效的。
MySQL 分页优化
asing1elife's blog
09-30 521
MySQL 可以通过以下方式优化分页效率 更多精彩 更多技术博客，请移步 asing1elife’s blog 问题 MySQL 分页查询多行会导致查询出很多无用数据后再进行筛选，效率低下 例如 limit 1000, 10 会排序出前 1010 行数据，然后取最后 10 行 解决 子查询先利用覆盖索引查询到满足条件的主键数据，再利用主键回表查找对应记录 SELECT co.na...
MySQL分页查询优化
辣香牛肉面的博客
07-26 672
对于使用 id 限定优化中的问题，需要 id 是连续递增的，但是在一些场景下，比如使用历史表的时候，或者出现过数据缺失问题时，可以考虑使用临时存储的表来记录分页的id，使用分页的id来进行 in 查询。当需要从数据库查询的表有上万条记录的时候，一次性查询所有结果会变得很慢，特别是随着数据量的增加特别明显，这时需要使用分页查询。另外我还做了十来次查询，从查询时间来看，基本可以确定，在查询记录量低于100时，查询时间基本没有差距，随着查询记录量越来越大，所花费的时间也会越来越多。
mysql分页查询优化,大数据量优化
01-19
传统的mysql分页查询 select * from table limit n , m MySQL 执行此类SQL时需要先分页(默认一页1000条数据)通过全表扫描到N行，然后再去取M行。对于此类操作，获取前面少数几行数据会很快，但是随着扫描的记录数越...
mysql大翻页limt 1700,100慢优化方案
藏经阁
03-05 798
1、引言 公司有个需求，统计短信系统每天status没成功的电话号码，然后进行统计分析。为了省事，我直接用了现成的sql, 该sql是分页，每次筛选limit一百条，最后合并下，最后不就得出所有的手机号了吗？ select id from smss where type='0' and status='0' and ctime >= '2020-03-03 00:00:00' and c...
mysql分页优化方案一
a...Z
06-16 415
因为前面的offset条数据最后都是不要的，就算将完整字段都拷贝来了又有什么用呢，所以我们可以将sql语句修改成下面这样。 上面这条sql语句，里面先执行子查询 select id from page order by id limit 6000000, 1, 这个操作，其实也是将在innodb中的主键索引中获取到6000000+1条数据，然后server层会抛弃前6000000条，只保留最后一条数据的id。但不同的地方在于，在返回server层的过程中，只会拷贝数据行内的id这一列，而不会拷贝数据行的所有
Mysql大数据量分页优化
我想问问天的专栏
01-28 1537
之前有看过到mysql大数据量分页情况下性能会很差，但是没有探究过它的原因，今天讲一讲mysql大数据量下偏移量很大，性能很差的问题，并附上解决方式。
MySQL-深度分页如何优化
子悠のziyou
02-26 1254
延迟关联的优化思路，跟子查询的优化思路其实是一样的：都是把条件转移到主键索引树，然后减少回表。先查询出所需要的数据的主键id，因为在非聚集索引中每个叶子节点记录的数据为其id，这样就不需要回表查询，然后再去主键索引中查询。根据业务实际需求，看能否替换为上一页，下一页的功能，这样子就可以通过和上次数据进行比较，搭上树分支过滤的快车。深度分页造成的结果，offset越来越大，回表的记录越来越多，SQL查询性能急剧下降，会出现大量的慢SQL。直接通过主键索引查找，省略了二级索引查找过程，性能更高。
MySQL高级篇——排序、分组、分页优化
种一棵树最好的时间是十年前，其次是现在
05-23 6423
排序优化建议、案例验证、范围查询时索引字段选择、filesort调优、双路排序和单路排序、分组优化、带排序的深分页优化
MySQL调优--09--分页查询优化
时光里的博客
07-23 1390
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档。
在 MySQL 中优化分页的 3 种方法
allway2的博客
12-04 2208
很多很多的 Web 应用程序需要分页浏览信息。从客户记录到 iTunes 收藏中的专辑。因此，作为Web开发人员和架构师，我们必须有效地完成所有这些工作。首先查看如何从 MySQL 数据库中获取信息。我们概述了实现此目的的三种方法。最终，我们试图避免丢弃记录。毕竟，如果服务器不获取它们，我们节省了很多。我们还能如何避免这种额外的工作。怎么记得姓氏。例如： 当然，这样的解决方案只有在按 ID 分页时才有效。如果您按姓名分页，它可能会变得更加混乱，因为可能有多个人具有相同的名称。如果 ID 不适用于您的应用
4种MySQL分页查询优化的方法，你知道几个？
weixin_43831977的博客
06-03 266
前言 当需要从数据库查询的表有上万条记录的时候，一次性查询所有结果会变得很慢，特别是随着数据量的增加特别明显，这时需要使用分页查询。对于数据库分页查询，也有很多种方法和优化的点。下面简单说一下我知道的一些方法。 准备工作 为了对下面列举的一些优化进行测试，下面针对已有的一张表进行说明。 表名：order_history 描述：某个业务的订单历史表 主要字段：unsigned i...
MySQL 分页查询越往后翻越慢的原因
最新发布
m0_61716416的博客
10-28 1407
在实际开发中，分页查询越往后翻越慢的主要原因是OFFSET导致了全表扫描和内存消耗。通过使用覆盖索引、子查询、游标、延迟关联以及合理分片等优化策略，可以显著减少扫描行数，提高分页查询的性能。在选择优化策略时，需要根据具体的业务场景和数据规模来决定。
Limit分页查询
qq_62736318的博客
01-28 610
第一个“位置偏移量”参数指示MySQL从哪一行开始显示，是一个可选参数，如果不指定“位置偏移量”，将会从表中的第一条记录开始（第一条记录的位置偏移量是0，第二条记录的位置偏移量是1，以此类推）；所谓分页显示，就是将数据库中的结果集，一段一段显示出来需要的条件。SELECT * FROM 表名 LIMIT 10,10;SELECT * FROM 表名 LIMIT 20,10;SELECT * FROM 表名 LIMIT 0,10;SELECT * FROM 表名 LIMIT 10;位置：limit放在最后。
mysql 分页查询优化
09-22
MySQL分页查询的优化可以从以下几个方面着手： 1. 使用合适的索引：对于分页查询，通常会使用limit和offset来限制返回的结果集，这时可以通过在查询的字段上创建适当的索引来加速查询。例如，对于ORDER BY操作，可以创建相应的索引来提高排序的速度。 2. 避免全表扫描：如果没有合适的索引，MySQL会执行全表扫描来获取需要的结果集。这会导致查询速度较慢。可以考虑添加适当的索引或者调整查询条件，使得MySQL能够使用索引来快速定位需要的数据。 3. 减少返回的数据量：对于分页查询，只需要返回指定的一页数据，而不是全部数据。可以通过调整limit和offset参数来控制返回的数据量。同时，尽量避免使用SELECT *来返回全部字段，而是只选择需要的字段，以减少数据传输的开销。 4. 缓存查询结果：如果相同的分页查询经常被执行，可以考虑将查询结果进行缓存，以避免重复的查询操作，提高查询速度。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值