MySQL 深度分页技巧,拯救海量数据查询慢的困局

058d6c03764abe6ea16f396fcf0e6603.png

若有收获,请记得分享和转发哦

06db5b8d99aa148591d91eafd76cd058.png

从一个问题说起

六年前刚工作的时候,发现分页场景下,当offset变大,MySQL处理速度非常慢!具体sql如下:

select * from t_record where age > 10 offset 10000 limit 10

下表所示为表t_record结构,为了简单起见,只列了我们将讨论的字段,其余字段省略。

字段名

类型

描述

id

bigint(20) unsigned

主键id

age

int

年龄

其中t_record是要查询的数据表,表中一共有50000条记录,age字段上有索引,且age>10的记录有20000条。

这条语句非常慢,基本达到了秒级延迟,在第二次请求有缓存之后,才变快。

在数据量这么少的情况下,走索引还这么慢,这完全不能接受,我就问我导师为什么,他反问“索引场景,MySQL中获得第n大的数,时间复杂度是多少?”

56e525263f583acf2dcadaa3d54260c2.png

答案的追寻


小白直觉作答

8487428aeb686c14d1477e48c7917559.png

c5681b28dfc64a91dcb9b9fe44ec1368.png

83ee70519b9a84942d22ec4f6c584e40.png

针对我们的问题,这里介绍两个相关的概念:

  • 聚簇索引:包含主键索引和对应的实际数据,索引的叶子节点就是数据节点;

  • 辅助索引:也叫二级节点,其叶子节点还是索引节点,并没有完整的数据,仅包含了索引值本身和主键id,用主键id反查聚蔟索引才能获取完整数据。

89995c4bcc8b037305d9c0d921b587b1.png

5672d452efc89c3f164dd9b1f8f282c9.png

985e0ad476e20c4cdc17d63ebb9c5eeb.png

ab7a9b77bc8109e9073ce5478744f07c.png

0b926ea4d40a197e79bdbb8c7c1ab256.png

1e185c9fb71294c6ff3941cf606caa48.png

  • 0
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值