mysql的limit优化（大数据量 Mysql limit分页慢的解决办法）

最新推荐文章于 2022-10-27 17:29:51 发布
最新推荐文章于 2022-10-27 17:29:51 发布
阅读量922 收藏 2
点赞数 1
分类专栏： mysql 文章标签： 数据库 大数据 java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/iteye_8381/article/details/82265331
版权

mysql的limit优化（大数据量 Mysql limit分页慢的解决办法）

单表数据量超千万，使用limit 大的话很慢，（aid 做主键索引）

SELECT   aid,jid,title,content FROM article_a WHERE aid>='10000000' limit 20
执行时间，2~3秒。

SELECT aid,jid,title,content FROM article_a WHERE aid>=(select aid from cnki_article_a WHERE aid='10000000') limit 20
查询花费 0.0003 秒

如果aid 大于的值，超过最大aid 的话（即不存在）效果更加明显，不存在第一条执行达到35秒。
iteye_8381
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
MySQL limit分页大偏移量慢的原因及优化方案
01-21
在 MySQL 中通常我们使用 limit 来完成页面上的分页功能，但是当数据量达到一个很大的值之后，越往后翻页，接口的响应速度就越慢。 本文主要讨论 limit 分页大偏移量慢的原因及优化方案，为了模拟这种情况，下面首先...
mysql limit分页（偏移量）过大时优化问题
全场梦游c的博客
05-25 3481
先说一下limit分页语法 select * from user_address limit 100000,10 limit后跟两个参数，第一个参数为从第几个数据开始，第二个参数为取多少个数据。 第一个参数也叫偏移量，初始值是0 如果数据量很小，这么写分页当然没问题，但是当数据量大起来的时候，查询速度就会慢很多。 如：select * from user_address limit 100,10 查询用时0.011S select * from user_address limit 100000
mysql limit耗时过长
qq_41633199的博客
02-04 1025
limit运行机制是先检索符合条件的指定数量的数据，再对数据进行截取，这样数据量很大的时候就会有性能问题，这里介绍的是运用数据表索引对limit查询进行优化。 一下面一张200万数据的表为例： 传统limit SELECT * FROM tableName ORDER BY id LIMIT 1000000,100; 时间: 5.371s 子查询方式，索引扫描 SELECT * FROM t...
上传文件太多太大时超时处理方案
luohuajiexiejuan的专栏
05-11 1846
首先给接口增加一个attribute，如： [HttpPost("Upload")] [DisableRequestSizeLimit] public ApiResult Upload(List<IFormFile> file) { var uploadInputs = new List<UploadInput>(); file.ForEach(d => ...
limit偏移量大的时候会变慢的原因以及处理方法
qq_43185463的博客
10-04 700
id是主键索引，sex是我们建的普通索引，这样我们直接查主键就减少10000000次回表的次数，只需10000001到10000010去回表。在有序的条件下，也可以使用比如创建时间等其他字段来代替主键id，但是前提是这个字段是建立了索引的。总之，使用条件过滤的方式来优化 limit 是有诸多限制的，一般还是推荐使用覆盖索引的方式来优化。使用这样的方式优化是有条件的：主键id必须是有序的。1、避免过多回表的方法1：使用覆盖索引。2、避免过多回表的方法2：条件过滤。耗时：33.465000s。
mysql limit查询优化方法(offset偏移量)
热门推荐
fly-fish的专栏
08-08 1万+
当网站达到一定的规模时，网站的各种优化是必须要进行的。 而网站的优化中，针对数据库各种优化是最重点的了。   mysql数据库中的查询语句有关limit语句的优化。   一般limit是用在分页的程序的分页上的，当应用数据量够小时，也许感觉不到limit语句的任何问题，但当查询数据量达到一定程度时，limit的性能就会急剧下降。 这个是通过大量实例得出来的结论。   对同一张表在不
MySQL limit使用方法以及超大分页问题解决
01-19
日常开发中,我们使用mysql来实现分页功能的时候,总是会用到mysql的limit语法.而怎么使用却很有讲究的,今天来总结一下. limit语法 limit语法支持两个参数,offset和limit,前者表示偏移量,后者表示取前limit条数据. ...
MySQL Limit性能优化及分页数据性能优化详解
01-19
MySQL Limit可以分段查询数据库数据，主要应用在分页上。虽然现在写的网站数据都是千条级别，一些小的的优化起的作用不大，但是开发就要做到极致，追求完美性能。下面记录一些limit性能优化方法。 Limit语法： ...
mysql limit分页优化详细介绍
09-09
MySQL最常用也最需要优化的就是limit，MySQL的limit给分页带来了极大的方便，但数据量一大的时候，limit的性能就急剧下降,需要的朋友可以参考下
mysql分页查询优化,大数据量优化
01-19
传统的mysql分页查询 ...特别是上线后数据量积累比较快,必须重视SQL优化,否则影响系统运行和用户使用体验 性能实验 直接用limit start, count分页语句， 也是我程序中用的方法： select * from table lim
mysql limit过大 遍历的一些问题
程序员小董的专栏
10-27 520
mysql limit 过大 会导致查询
mysql大数据量下的limit m , n分页查询缓慢的优化办法
weixin_47074535的博客
02-23 1341
mysql大数据量下的limit m , n分页查询缓慢的优化总结
mysql百万级数据limit查询慢问题
泉眼和溪流的关系，大概是泉眼会被溪流一点一滴的占据
09-30 1707
先建个简单表，造点数据 CREATE TABLE `mq_msg` ( `id` bigint NOT NULL, `msg_id` varchar(128) CHARACTER SET utf8mb4 COLLATE utf8mb4_bin NOT NULL COMMENT '业务消息id', `title` varchar(128) CHARACTER SET utf8mb4 COLLATE utf8mb4_bin DEFAULT NULL, `content` varchar(1024
MYSQL百万级以上分页LIMIT速度太慢的优化方法
netuser1937的博客
11-16 4595
在MYSQL中LIMIT可以实现快速分页，但是当表中数据到了百万级别以上时就会变得非常慢，甚至造成服务器宕机。 //速度很快 SELECT * FROM table LIMIT 0,10; //速度很慢 SELECT * FROM table LIMIT 500000,10; LIMIT 500000,10的含义：扫描满足条件的500010行，扔掉前面的500000行，返回最后的10行，问题就在这里。 LIMIT 10 仅仅扫描10行。 日常分页SQL语句 SELECT id,uname,conten.
解决MySQL使用limit偏移量较大效率慢的问题
hellokitty_nba的博客
03-29 4856
解决MySQL使用limit偏移量较大效率慢的问题
limit 10 offset 1000000为什么会很慢
初夏0811的博客
07-24 1827
一般刚开始学SQL的时候，会这样写： SELECT * FROM table ORDER BY id LIMIT 1000, 10; 但在数据达到百万级的时候，这样写会慢死 SELECT * FROM table ORDER BY id LIMIT 1000000, 10; 也许耗费几十秒 网上很多优化的方法是这样的 SELECT * FROM table WHERE id >= (SELECT id FROM table LIMIT 1000000, 1) LIMIT 10; 是的，速度提升到
mysql大数据量limit很慢问题解决
程序员大航子
09-08 2229
转载本文章请标明作者和出处 本文出自《爱喝纯净水的南荣牧歌》 开始行动，你已经成功一半了，献给正在奋斗的我们 缘起 最近公司在做一个项目，数据库选型为mysql8.0版本，做性能测试的时候王数据的业务表中导入了1088W的数据，然后通过添加索引等手段来进行性能优化，到最后发现当大分页查询的时候，系统慢的一批。具体有多慢，，， 我查第10870000页数据的时候竟然要40多秒。 SELECT id, device_id, device_name, group_name, group_id , regi.
|MySQL数据量大时limit往后会速度变慢
苦行僧
07-23 1031
当数据量特别大的时候，我们有如下SQL： SELECT * FROM t LIMIT 10000,10 当数据量有上百万的时候，这种查询是很慢的。但我们将 * 改为索引字段时： SELECT ID FROM t LIMIT 10000,10 # 这种查询就会很快。 那么我们需要将SQL改造如下： SELECT * FROM t WHERE ID IN (SELECT ID FROM t LIMIT 10000,10) 然后现在速度就快了起来。当然也可以改造为如下： SELECT * F.
mysql limit查询优化（数据量大的时候很优）
weixin_30501857的博客
04-02 1167
mysql limit查询优化[转载],由于limit经常用到，却没有注意，因为平时做的项目都比较小，所以也没有考虑去怎么优化，今天看了一篇关于mysql limit优化的文章，感觉很好 于是转载过来 原文地址在这里http://www.phpobject.net/blog/read.php?119 MYSQL的优化是非常重要的。其他最常用也最需要优化的就是limit。mysql的limit给...
mysql limit 很大优化
最新发布
11-14
1.使用子查询：将limit分页查询转换为子查询，先查询出符合条件的所有数据，然后再使用limit进行分页。这种方法可以避免大偏移量的问题，但是会增加查询的时间和内存消耗。 2.使用游标：使用游标可以避免一次性查询...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值