滚动分页导致的数据重复或者数据缺失问题

最新推荐文章于 2023-03-22 23:19:00 发布
最新推荐文章于 2023-03-22 23:19:00 发布
阅读量1.2k 收藏
点赞数
分类专栏： java 实践
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u014088450/article/details/105981698
版权

1.按照时间倒序进行分页，导致当数据出现更新时，第二页以及后续页数的数据与前一页的数据出现重复或者缺失部分数据

2.目前分页在sql中使用的是根据某些属性进行分组聚合后再分页，这种聚合是属于无状态的，即数据是否有更新，聚合操作本身是无感知的，没有稳定的唯一标识，如何解决当前问题，网上大多提供的答案是按照ID或者时间等唯一标识某一条数据，但是我的情况是数据没有唯一标识的属性

3.目前提供的方案只能是当刷新第二页及之后页数时，将之前页数的所有数据都返回给前端，进行一并更新，此方法十分损害性能，尤其是当数据量较大的情况下，但貌似也是目前唯一的方案

slow tempo
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
postgresql分页数据重复问题的深入理解
09-09
总之，理解PostgreSQL的排序机制和优化策略是解决分页数据重复问题的关键。通过选择适当的排序字段、利用索引以及合理设置系统参数，我们可以有效地防止这种问题，提供更稳定、准确的分页查询结果。
Js读取json数据实现滚动分页实例.rar
11-10
Js读取json数据实现滚动分页实例 Js读取json数据实现滚动分页实例 Js读取json数据实现滚动分页实例
ListView滚动后内容重复的问题
crystalddd的专栏
08-10 1754
最可能出现重复的情况就是getView(int position, View convertView, ViewGroup parent)中的convertview利用的情况，由于getview的时候，listview自身会复用已存在的item，即重用最先新建的那几个item，还有就是注意tag的使用，convertView.getTag()返回的也是重用的view，其状态是和被重用的一样，包括图片
Android 下拉分页重复数据问题解决思路
xwq911的专栏
11-27 1647
Android ListView 翻页是初学者都会碰到的问题，但是现在要实现它的方法和实例网上已经很多很多了，但是本菜鸟一直被一个问题所困扰。    是什么问题呢？咋们先来说说网页上的分页吧，比如每次分页显示是10条记录，那么客户端把要显示的页数和每页要显示的数量发送到服务器，然后服务器根据这两个参数去后来取数据，页码*页数，就是客户端请求的数据了，而客户端每次请求翻页时，每次显示的都是新的、服务
根据时间排序分页查询导致部分数据丢失原因
huangzhe1013的博客
03-16 2992
场景：根据时间排序分页查询交易记录表时，查总数没问题，但是从一页到下一页的时候，在每页分隔的地方可能会出现记录部分丢失。分析：SELECT id, orderNo, addTime FROM deal_tab ORDER BY addTime DESC LIMIT 1，20如果数据库存入时间最低单位到秒，那么在交易多的时候表中会出现多笔在同一时间生成的订单，当以时间排序时，数据库难以判断时间先后，...
js阻止滚动事件多次执行
m0_51525349的博客
03-09 1408
js阻止滚动事件多次执行 当我们写滚轮事件时，有时没有达到自己想要的效果，其中可能就是因为滚轮在滚动时，多次执行了滚动事件，看下面代码。 window.onscroll=function(){ console.log(123) } 上面滚动了一次，结果输出了多个123，说明了滚动事件被多次执行了，想要解决这个问题，就给滚轮事件添加一个状态就好了 //设置滚轮事件的状态 var state = true; function changestate()
分页查询出现重复数据
json_li的博客
12-30 1368
使用laravel做分页列表查询接口，每页返回5条数据，发现请求1页，2页最后一条数据出现重复，而总数据量不变，导致有一条数据被覆盖。
vue 使用鼠标滚动加载数据的例子
10-16
在Vue.js应用中，实现鼠标滚动加载数据是一种常见的优化用户体验的方法，...在实际项目中，可以进一步优化，例如添加分页、处理数据加载的错误情况，或者使用Vue.js的计算属性和Vue Router配合实现更复杂的加载逻辑。
分页_分页实现数据表_源码
09-29
分页是现代数据驱动应用的关键组件，它有效解决了大量数据展示的问题。理解并掌握其原理和实现方式对于任何IT专业人员来说都是至关重要的。无论是在前端还是后端，都需要考虑到性能优化和用户体验，以提供高效、流畅...
一次因分页查询引发的数据漏处理问题
疯狂的蜗牛
06-03 1086
背景 活动期间，需要对满足活动条件的用户发放购物券。券是凌晨发的，早上过来发现有一个符合条件的用户没发。在日志中也找不到对应的发券日志，感觉这条数据就像蒸发了一样。 既然没有数据处理日志，大概率就是数据压根就没查出来嘛。 把视线转移到查找需要发放奖励的数据上来 select * from activity_statistics where status = ?1 order by id limit ?2,?3 这是一条活动数据的查询sql，其中包含了数据的状态status。 在发券结束之后，会将数据的st
sql怎么回滚的时候不覆盖新有数据_数据库相关问题面试小结
weixin_39716971的博客
12-17 108
点击蓝字 关注我们 一起进步最近面试时，每家公司的必问题，今日作此分享，如果存在疑问，还请指正。Q1什么是索引索引指数据库的目录，比如：字典上面的字母目录 (适用于大数据量)Q2建立索引的优缺点？优点:查询速度快缺点：增删改慢，因为数据库要同步去维护索引文件，所以速度慢Q3索引有哪些？普通 主键 唯一 组合Q4一般你们会在什么情况下加索引？(1)主键自动建立唯一索引(2)频繁作为查询条件...
解决页面数据重复问题。
m0_62154751的博客
08-22 456
最近在开发一个项目中遇到页面数据重复问题，自己思考了一下大概问题出哪，是因为加了分页的效果，当页面触底时，会再次请求，大家先看一下分页的处理。
【resthighlevelclient 分页查询大量数据，结果只返回一万条数据的解决办法】
树呆熊的博客
01-27 2774
resthighlevelclient 分页使用了from，size分页，当es中查询的数据量大于一万条，分页查询的结果最多只返回了一万条。。。。，解决办法如下： 设置： sourceBuilder.trackTotalHits(true);
分页出现数据重复的解决方案
热门推荐
zhqf1989的博客
03-04 1万+
用户量急剧上升中，偶尔会发现这么一个问题，就是下一页的数据中总会出现上一页的几条数据。 为什么会造成这个问题呢？用户在查询第一页的时候，停留了一下，然后在这段时间内 又有两个用户注册了，然后请求第二页的数据的时候 排序的时候 两个新用户排在了最前面(按照注册时间排序) 所以第二次排序的时候就变成了第二页的数据。 那如何解决这个问题呢？ 在每次请求的时候都带上前台最后一条数据的注册时间,然后查...
ES--深分页Scroll
chbxw
03-31 2731
一、前言 1.1、scroll与from+size区别 之前讲过from+size的分页，为何又有scroll+size的深分页呢？这里先对比一下两者的区别； ES对于from+size的个数是有限制的，二者之和不能超过1w。当所请求的数据总量大于1w时，可用scroll来代替from+size。 from+size在ES查询数据的方式步骤如下： 1、先将用户指定的关键字进行分词； 2、将词汇去分词库中进行检索，得到多个文档的id； 3、去各个分片中拉取指定的数据，相对耗时较长； 4、将数据根据score
分页查询出现数据重复或丢失，你遇到过吗？
程序员小明1024
03-22 989
一、问题背景 最近部分销售人员反馈在 APP 上查询自己名下客户订单数据时，当往下拉取数据的时候，列表上经常出现重复的订单数据，经过排查，后端代码是通过如下方式来实现数据的分页查询的。 limit offset, size order by create_time desc 经过细致的分析，这种排序方式，在 app 端分页查询的时候，确实存在问题。 详细的分析过程如下！ 二、原因分析 首先我...
pagehelper分页查询重复数据
最新发布
09-09
您好！对于使用 PageHelper 进行分页查询时出现重复数据的问题，有几种可能的原因和解决方案： 1. 数据库中的数据存在相同的值：请确保数据库表中的数据没有重复记录。您可以使用 SQL 的 DISTINCT 关键字去除重复数据，或者通过其他方式进行数据清洗。 2. 分页参数设置错误：请确认您在使用 PageHelper 进行分页查询时，传递的参数是否正确。比如，确保每页查询的数量和当前页码的设置是准确无误的。 3. 数据库排序问题：如果您没有指定排序规则，或者排序规则不正确，可能会导致分页查询出现重复数据。请确保在分页查询中指定了正确的排序规则，以保证查询结果的准确性。 4. 分页插件版本问题：如果您使用的是较旧版本的 PageHelper 分页插件，可能存在一些已知问题。建议尝试更新到最新版本，以获得更好的稳定性和功能。 如果以上解决方案都无法解决您的问题，请提供更多详细信息，例如代码示例和相关配置，以便我能更准确地帮助您解决问题。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值