LIMIT page_no,page_total分页的优化

最新推荐文章于 2022-07-29 11:19:23 发布
最新推荐文章于 2022-07-29 11:19:23 发布
阅读量96 收藏
点赞数
分类专栏： 数据库 文章标签： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/super_ufo/article/details/88304809
版权
转载http://yueliangdao0608.blog.51cto.com/397025/108237关于分页的优化。
我们知道，在MySQL中分页很简单，直接LIMIT page_no,page_total 就可以了。
可是当记录数慢慢增大时，她就不那么好使了。
这里我们创建摘要表来记录页码和原表之间的关联。
下面为测试数据。

原表：
CREATE TABLE `t_group` (
`id` int(11) NOT NULL auto_increment,
`money` decimal(10,2) NOT NULL,
`user_name` varchar(20) NOT NULL,
`create_time` timestamp NOT NULL default CURRENT_TIMESTAMP on update CURRENT_TIMESTAMP,
PRIMARY KEY (`id`),
KEY `idx_combination1` (`user_name`,`money`)
) ENGINE=MyISAM DEFAULT CHARSET=utf8;

原表总记录数：
mysql> select count(*) from t_group;
+----------+
| count(*) |
+----------+
| 10485760 |
+----------+
1 row in set (0.00 sec)
分页表：


CREATE TABLE `t_group_ids` (
`id` int(11) NOT NULL,
`group_id` int(11) NOT NULL,
PRIMARY KEY (`id`,`group_id`),
KEY `idx_id` (`id`),
KEY `idx_group_id` (`group_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;


插入分页表数据。当然这里如果你的表主键不是ID,那你得自己想办法搞这个分页表的数据了。这个好实现，就不说了。
mysql> insert into t_group_ids select ceil(id/20),id from t_group;
Query OK, 10485760 rows affected (2 min 56.19 sec)
Records: 10485760 Duplicates: 0 Warnings: 0

现在来看看对比数据。

用普通LIMIT来实现分页。
mysql> select * from t_group where 1 limit 20;
+----+--------+-----------+---------------------+
| id | money | user_name | create_time |
+----+--------+-----------+---------------------+
| 1 | 50.23 | david | 2008-10-23 12:55:49 |
| 2 | 55.23 | livia | 2008-10-23 10:02:09 |
| 3 | 100.83 | leo | 2008-10-23 10:02:22 |
| 4 | 99.99 | lucy | 2008-10-23 10:02:39 |
| 5 | 299.99 | simon | 2008-10-23 10:02:52 |
| 6 | 599.99 | sony | 2008-10-23 10:03:03 |
| 7 | 599.99 | rick | 2008-10-23 10:03:12 |
| 8 | 9.99 | anne | 2008-10-23 10:03:47 |
| 9 | 9.99 | sarah | 2008-10-23 10:04:31 |
| 10 | 900.99 | john | 2008-10-23 10:04:50 |
| 11 | 0.23 | david | 2008-10-23 10:05:31 |
| 12 | 5.23 | livia | 2008-10-23 10:05:31 |
| 13 | 50.83 | leo | 2008-10-23 10:05:31 |
| 14 | 49.99 | lucy | 2008-10-23 10:05:31 |
| 15 | 249.99 | simon | 2008-10-23 10:05:31 |
| 16 | 549.99 | sony | 2008-10-23 10:05:31 |
| 17 | 549.99 | rick | 2008-10-23 10:05:31 |
| 18 | -40.01 | anne | 2008-10-23 10:05:31 |
| 19 | -40.01 | sarah | 2008-10-23 10:05:31 |
| 20 | 850.99 | john | 2008-10-23 10:05:31 |
+----+--------+-----------+---------------------+
20 rows in set (0.01 sec)


用分页表来实现分页。

mysql> select a.* from t_group as a inner join t_group_ids as b where a.id = b.g
roup_id and b.id = 1;
+----+--------+-----------+---------------------+
| id | money | user_name | create_time |
+----+--------+-----------+---------------------+
| 1 | 50.23 | david | 2008-10-23 12:55:49 |
| 2 | 55.23 | livia | 2008-10-23 10:02:09 |
| 3 | 100.83 | leo | 2008-10-23 10:02:22 |
| 4 | 99.99 | lucy | 2008-10-23 10:02:39 |
| 5 | 299.99 | simon | 2008-10-23 10:02:52 |
| 6 | 599.99 | sony | 2008-10-23 10:03:03 |
| 7 | 599.99 | rick | 2008-10-23 10:03:12 |
| 8 | 9.99 | anne | 2008-10-23 10:03:47 |
| 9 | 9.99 | sarah | 2008-10-23 10:04:31 |
| 10 | 900.99 | john | 2008-10-23 10:04:50 |
| 11 | 0.23 | david | 2008-10-23 10:05:31 |
| 12 | 5.23 | livia | 2008-10-23 10:05:31 |
| 13 | 50.83 | leo | 2008-10-23 10:05:31 |
| 14 | 49.99 | lucy | 2008-10-23 10:05:31 |
| 15 | 249.99 | simon | 2008-10-23 10:05:31 |
| 16 | 549.99 | sony | 2008-10-23 10:05:31 |
| 17 | 549.99 | rick | 2008-10-23 10:05:31 |
| 18 | -40.01 | anne | 2008-10-23 10:05:31 |
| 19 | -40.01 | sarah | 2008-10-23 10:05:31 |
| 20 | 850.99 | john | 2008-10-23 10:05:31 |
+----+--------+-----------+---------------------+
20 rows in set (0.00 sec)


取第50W页的数据。
原来表：
mysql> select * from t_group where 1 limit 9999980,20;
+----------+---------+-----------+---------------------+
| id | money | user_name | create_time |
+----------+---------+-----------+---------------------+
| 9999981 | 810.13 | david | 2008-10-23 10:09:24 |
| 9999982 | 815.13 | livia | 2008-10-23 10:09:24 |
| 9999983 | 860.73 | leo | 2008-10-23 10:09:24 |
| 9999984 | 859.89 | lucy | 2008-10-23 10:09:24 |
| 9999985 | 1059.89 | simon | 2008-10-23 10:09:24 |
| 9999986 | 1359.89 | sony | 2008-10-23 10:09:24 |
| 9999987 | 1359.89 | rick | 2008-10-23 10:09:24 |
| 9999988 | 769.89 | anne | 2008-10-23 10:09:24 |
| 9999989 | 769.89 | sarah | 2008-10-23 10:09:24 |
| 9999990 | 1660.89 | john | 2008-10-23 10:09:24 |
| 9999991 | 760.13 | david | 2008-10-23 10:09:24 |
| 9999992 | 765.13 | livia | 2008-10-23 10:09:24 |
| 9999993 | 810.73 | leo | 2008-10-23 10:09:24 |
| 9999994 | 809.89 | lucy | 2008-10-23 10:09:24 |
| 9999995 | 1009.89 | simon | 2008-10-23 10:09:24 |
| 9999996 | 1309.89 | sony | 2008-10-23 10:09:24 |
| 9999997 | 1309.89 | rick | 2008-10-23 10:09:24 |
| 9999998 | 719.89 | anne | 2008-10-23 10:09:24 |
| 9999999 | 719.89 | sarah | 2008-10-23 10:09:24 |
| 10000000 | 1610.89 | john | 2008-10-23 10:09:24 |
+----------+---------+-----------+---------------------+
20 rows in set (4.21 sec)

分页表：

mysql> select a.* from t_group as a inner join t_group_ids as b where a.id = b.g
roup_id and b.id = 500000;
+----------+---------+-----------+---------------------+
| id | money | user_name | create_time |
+----------+---------+-----------+---------------------+
| 9999981 | 810.13 | david | 2008-10-23 10:09:24 |
| 9999982 | 815.13 | livia | 2008-10-23 10:09:24 |
| 9999983 | 860.73 | leo | 2008-10-23 10:09:24 |
| 9999984 | 859.89 | lucy | 2008-10-23 10:09:24 |
| 9999985 | 1059.89 | simon | 2008-10-23 10:09:24 |
| 9999986 | 1359.89 | sony | 2008-10-23 10:09:24 |
| 9999987 | 1359.89 | rick | 2008-10-23 10:09:24 |
| 9999988 | 769.89 | anne | 2008-10-23 10:09:24 |
| 9999989 | 769.89 | sarah | 2008-10-23 10:09:24 |
| 9999990 | 1660.89 | john | 2008-10-23 10:09:24 |
| 9999991 | 760.13 | david | 2008-10-23 10:09:24 |
| 9999992 | 765.13 | livia | 2008-10-23 10:09:24 |
| 9999993 | 810.73 | leo | 2008-10-23 10:09:24 |
| 9999994 | 809.89 | lucy | 2008-10-23 10:09:24 |
| 9999995 | 1009.89 | simon | 2008-10-23 10:09:24 |
| 9999996 | 1309.89 | sony | 2008-10-23 10:09:24 |
| 9999997 | 1309.89 | rick | 2008-10-23 10:09:24 |
| 9999998 | 719.89 | anne | 2008-10-23 10:09:24 |
| 9999999 | 719.89 | sarah | 2008-10-23 10:09:24 |
| 10000000 | 1610.89 | john | 2008-10-23 10:09:24 |
+----------+---------+-----------+---------------------+
20 rows in set (0.03 sec)


我们来取最后一页的数据。
原表：

mysql> select * from t_group where 1 limit 10485740,20;
+----------+---------+-----------+---------------------+
| id | money | user_name | create_time |
+----------+---------+-----------+---------------------+
| 10485741 | 1935.42 | david | 2008-10-23 10:09:24 |
| 10485742 | 1955.42 | livia | 2008-10-23 10:09:24 |
| 10485743 | 2137.82 | leo | 2008-10-23 10:09:24 |
| 10485744 | 2134.46 | lucy | 2008-10-23 10:09:24 |
| 10485745 | 2934.46 | simon | 2008-10-23 10:09:24 |
| 10485746 | 4134.46 | sony | 2008-10-23 10:09:24 |
| 10485747 | 4134.46 | rick | 2008-10-23 10:09:24 |
| 10485748 | 1774.46 | anne | 2008-10-23 10:09:24 |
| 10485749 | 1774.46 | sarah | 2008-10-23 10:09:24 |
| 10485750 | 5338.46 | john | 2008-10-23 10:09:24 |
| 10485751 | 1735.42 | david | 2008-10-23 10:09:24 |
| 10485752 | 1755.42 | livia | 2008-10-23 10:09:24 |
| 10485753 | 1937.82 | leo | 2008-10-23 10:09:24 |
| 10485754 | 1934.46 | lucy | 2008-10-23 10:09:24 |
| 10485755 | 2734.46 | simon | 2008-10-23 10:09:24 |
| 10485756 | 3934.46 | sony | 2008-10-23 10:09:24 |
| 10485757 | 3934.46 | rick | 2008-10-23 10:09:24 |
| 10485758 | 1574.46 | anne | 2008-10-23 10:09:24 |
| 10485759 | 1574.46 | sarah | 2008-10-23 10:09:24 |
| 10485760 | 5138.46 | john | 2008-10-23 10:09:24 |
+----------+---------+-----------+---------------------+
20 rows in set (4.88 sec)

分页表：

mysql> select a.* from t_group as a inner join t_group_ids as b where a.id = b.g
roup_id and b.id = 524288;
+----------+---------+-----------+---------------------+
| id | money | user_name | create_time |
+----------+---------+-----------+---------------------+
| 10485741 | 1935.42 | david | 2008-10-23 10:09:24 |
| 10485742 | 1955.42 | livia | 2008-10-23 10:09:24 |
| 10485743 | 2137.82 | leo | 2008-10-23 10:09:24 |
| 10485744 | 2134.46 | lucy | 2008-10-23 10:09:24 |
| 10485745 | 2934.46 | simon | 2008-10-23 10:09:24 |
| 10485746 | 4134.46 | sony | 2008-10-23 10:09:24 |
| 10485747 | 4134.46 | rick | 2008-10-23 10:09:24 |
| 10485748 | 1774.46 | anne | 2008-10-23 10:09:24 |
| 10485749 | 1774.46 | sarah | 2008-10-23 10:09:24 |
| 10485750 | 5338.46 | john | 2008-10-23 10:09:24 |
| 10485751 | 1735.42 | david | 2008-10-23 10:09:24 |
| 10485752 | 1755.42 | livia | 2008-10-23 10:09:24 |
| 10485753 | 1937.82 | leo | 2008-10-23 10:09:24 |
| 10485754 | 1934.46 | lucy | 2008-10-23 10:09:24 |
| 10485755 | 2734.46 | simon | 2008-10-23 10:09:24 |
| 10485756 | 3934.46 | sony | 2008-10-23 10:09:24 |
| 10485757 | 3934.46 | rick | 2008-10-23 10:09:24 |
| 10485758 | 1574.46 | anne | 2008-10-23 10:09:24 |
| 10485759 | 1574.46 | sarah | 2008-10-23 10:09:24 |
| 10485760 | 5138.46 | john | 2008-10-23 10:09:24 |
+----------+---------+-----------+---------------------+
20 rows in set (0.01 sec)
super_ufo
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
MyBatis分页查询原理——如何使用MyBatis的分页插件对分页查询进行优化。
禅与计算机程序设计艺术
07-28 1487
1.1 概述MyBatis 是一款优秀的持久层框架，它支持使用简单的 XML 或注解配置形式来实现对数据库的访问，MyBatis 免除了几乎所有的 JDBC 代码和参数的手工设定， 并用mybatis提供的XML映射文件来代替原始的SQL语句。MyBatis通过控制反转（IoC）和依赖注入（DI）功能完美地实现了ORM框架。2.相关概念分页：分页指将数据分成多块，每一块显示给用户，用户只可以看到自己需要的一部分。分页最主要的目的是为了防止数据量过大导致页面加载缓慢，提高用户体验。
封装分页器el-pagination
weixin_52862941的博客
08-11 1494
封装分页器
PageHelper 分页，total总数等于每页数量的问题解决
热门推荐
zjuwzp的博客
09-23 1万+
1）Mapper文件代码如下： @Select("select phone_charge,status,created_time from order_management where " + "user_id =#{userId} and created_time > #{timeLower} order by created_time desc") Li...
MyBatis-plus中的Page total总为0，list数据正常
Within的博客
06-02 1595
一、创建一个类注入PaginationInterceptor @Configuration public class MybatisPlusConfig { /** * 分页插件 */ @Bean public PaginationInterceptor paginationInterceptor() { return new PaginationInterceptor(); } } 二、去除pom.xml中的pagehelpe...
Page分页
Mr_tianyanxiaobai的博客
06-30 1679
图书分页 分页模块的分析 分页模型Page 的抽取（当前页数，总页数，总记录数，当前页数据，每页记录数） /** * Page 是分页的模型对象 * @param <T> 是具体的模块的javaBean 类 */ public class Page<T> { public static final Integer PAGE_SIZE = 4; // 当前页码 private Integer pageNo; // 总页码 private Integer pageTotal; // 当
php mysql limit 分页_原生PHP实现Mysql数据分页功能
weixin_36468605的博客
01-19 257
一. 思路整理实现一个数据分页功能,需要有数据的总条数,每页展示的条数,和当前在第几页这三个参数通过⌈总条数/每页展示的条数⌉可以得到总页数,比如某留言板有101条留言,每页展示10条,一那就需要11个页面进行展示数据分页核心就是通过SQL的limit函数来控制当前页显示第几条到第几条,比如第一页limit(0,10),就是第1条到第10条,第二页是limit(11,10),就是第11条到第20条...
layui分页limit不显示_layui table分页 page为false时，limit问题
weixin_39831705的博客
12-24 1313
弱省互测&num;0 t1题意 给一个\(N \times M\)的01网格,1不能走,从起点\((1, 1)\)走到\((N, M)\),每次只能向下或向右走一格,问两条不相交的路径的方案数.(n, m<=1000) ...安装appcan后打开eclipse出错原有eclipse,后安装appcan后打开eclipse出错,因为appcan是自带的编译器也是eclipse所以会...
mysql 删除数据 分页_使用limit分页查询时,做delete操作,会导致丢失数据
weixin_30175751的博客
01-19 1460
使用limit分页查询时,做delete操作,会导致丢失数据一、准备数据1.1 mysql数据脚本SET NAMES utf8mb4;SET FOREIGN_KEY_CHECKS = 0;-- ------------------------------ Table structure for test_so_item-- ----------------------------DROP TABL...
mysql sqlnocache_Mysql性能优化案例研究-覆盖索引和SQL_NO_CACHE
weixin_29358053的博客
01-19 499
场景产品中有一张图片表pics，数据量将近100万条，有一条相关的查询语句，由于执行频次较高，想针对此语句进行优化表结构很简单，主要字段：user_id 用户IDpicname 图片名称smallimg 小图名称一个用户会有多条图片记录，现在有一个根据user_id建立的索引：uid，查询语句也很简单：取得某用户的图片集合：select picname, smallimg from pics wh...
关于PageInfo的total属性得到的值等于当前页记录数
Orcas
11-11 1万+
问题： 使用PageHelper分页助手，以往总记录数通过pageInfo.getTotal()获取都没有问题。这次做了个商品列表分页，发现total等于当前页的数量，相当于size了。而后台SQL确实查询出了所有的数据。 原因： 爬了几篇文后，总结一下。 total属性确实是总记录数，并不是有些文章里说的当前页数。 其实解答还是在Github作者的Issues中： https://github....
PageHelper分页pageSize和total异常问题
weixin_45059962的博客
05-21 3150
分页开启语句必须放到查询语句之前，不然无效。 // 开启分页 PageHelper.startPage(pageNum, pageSize); // 查询 List<Course> courseList = baseMapper.selectByCondition(); pageSize等于total的问题是因为在给PageInfo封装值之前进行过多条sql查询，PageInfo会默认对最后一条查询结果进行封装，所以导致最开始的数据丢失，这种情况主要是：查询的数据来自多张表的同时又要做分页，一
使用page分页，total=0，数据正常
qq_43410132的博客
07-29 2068
在我使用page分类的时候，控制台上显示total=5是正常的，但是使用debug的时候，发现page类里的total=0，这导致前台页面收不到总数，经过多次调试发现是，没有配置MP的分页插件时，没有写注解@Configuration。添加上之后，就能正常的接受到total数据了！...
Mybatis Plus分页Page total始终为0
卡哇伊的码农
02-20 9252
我用的Mybatis-Plus是com.baomiddou:mybatis-plus:2.1.9 发现自己代码都是写正确的，始终无法得到分页对象里面的total 原因：发现是pom还引入了其它的分页插件 pagehelper-spring-boot-starter 可能是2个分页插件存在冲突造成的...
PageHelper查询分页
black_的博客
07-15 4250
页面加载，请求ajax，查询结果分页显示（解析数据和页码）。增加模糊条件查询，同样也要分页显示。 jar包： applicationContext-mybatis.xml: <?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans" ...
EF4中分页
weixin_30298497的博客
07-06 129
代码using(varcontext=newEFDemoEntities()){intpageIndex=0;intpageSize=3;varorders=context.Orders.Where(o=>o....
PageHelper分页踩坑：Pages总页数查出来始终为1，Total数有误.
qq_50560491的博客
03-26 6216
记录SpringBoot+Mybatis+PageHelper分页踩坑：Pages总页数查出来始终为1，Total数有误 本人通过上面这位博主的文章解决了此方法，大家可以去支持一下。这里我再以我的方式讲一遍，可以让你们来理解两种不同的讲法，顺便增加一下这个坑的搜索度。我会通过代码加解释来说明。 //开启分页 PageHelper.startPage(page,limit); List<Pojo> pojoList=pojoService.getPageList(); 解释名词：p
Mysql分页之limit用法与limit优化
weixin_33974433的博客
10-04 777
Mysql limit分页语句用法 与Oracle和MS SqlServer相比，mysql的分页方法简单的让人想哭。 --语法： SELECT * FROM table LIMIT [offset,] rows | rows OFFSET offset --举例： select * from table limit 5; --返回前5行 select * from...
JAVA中网页翻页_网页分页功能的实现
最新发布
05-26
2. 根据每页显示的数据条数和当前页码计算出需要跳过的数据条数，然后使用 SQL 语句的 LIMIT 子句获取需要显示的数据。 3. 将数据显示在网页上，并生成分页链接。 下面是一个简单的实现示例： ```java // 定义每...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值