Django分页器Paginator数据重复问题

最新推荐文章于 2023-11-30 14:03:43 发布
最新推荐文章于 2023-11-30 14:03:43 发布
阅读量962 收藏 1
点赞数 1
分类专栏： Django 文章标签： django python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u013660169/article/details/89704295
版权
本文探讨了Django分页器Paginator在实际使用中出现数据重复的问题。问题表现为每页最后一条数据重复，且仅在前15页出现。通过排查和查阅资料，发现原因是获取数据集时使用的字段为空，替换为非空字段后问题得到解决。提醒开发者在使用Django分页器时注意order_by字段的正确设置。
摘要由CSDN通过智能技术生成

问题描述

上周添加了一个新的爬虫目标，前后端做好list页，详情页，over
没想到本周管理爬虫信息的小哥反映说，每页都会出现一条重复的数据，这条重复的数据永远占据着每页的最后一条

debug

设想了几个可能导致该问题的原因

  1. 使用html模板时误加了一行代码，如posts.last之类
  2. 分页器使用方法错误

排查

经排查发现：

  1. html模板语言使用完全正确
  2. 分页器使用完全正确

而且当时很诡异的一件事是：线下跑的数据不重复，线上的重复，真是匪夷所思
于是先手动操作删除了线上那条重复的数据，结果发现仍然有新的数据替代了原来重复的那条。而且重复的现象只出现在前15页，后面几页并不会出现，这就更匪夷所思了

最后在staskoverflow搜索关键字django paginator repeat data的时候发现了类似的问题：
https://stackoverflow.com/questions/5044464/django-pagination-is-repeating-results
猜想应该是queryset的order_by导致的

在代码中发现，原来获取数据集时order_by对应的字段为空，讲其替换为一个一定存在的字段后成功解

最低0.47元/天 解锁文章
偷天神猫
关注
专栏目录
Django 解决distinct无法去除重复数据的问题
12-17
今天需要使用Django查询一列的字段（不含重复），搞了一上午，发现这样的事情：如图： 得到的数据几乎是相等的，没有区别。 但是仔细看会发现：下面的数据比起上面的还是少了一个。 解决办法： django的distinct在使用之前必须先使用order_by方法排序，如图： 这样就完美解决了这个问题。 补充知识：Distinct和Group by去除重复字段记录 重复记录 有两个意义，一是完全重复的记录，也即所有字段均重复的记录 二是部分关键字段重复的记录，比如Name字段重复，而其他字段不一定重复或都重复可以忽略。 1、对于第一种重复，比较容易解决，使用 select distinct
【已解决】Laravel paginate()分页后 出现数据重复 或 数据丢失问题
特别剑的博客
07-13 1729
【已解决】Laravel paginate()分页后 出现数据重复 或 数据丢失问题 问题情景描述： 已知有一张学生表与一张消费积分表。现根据每个学生的消费积分对学生表进行正序排列（即积分从高到低排列）。 学生表students 与 消费积分表orders表为一对多关系（一条学生数据 对应 多条投票数据）。 数据表格示例 学生表（students） id name 1 李苦瓜 2 脸盆王 3 老木棍 消费积分表（orders） id vote students_id
django自定义分页器
weixin_34019144的博客
06-18 137
自定义分页器页码的渲染通常都是单数1，3，5，7，9,符号中国人的审美标准需要完善的1.加首页和尾页2.页码的个数应该是固定的自定义分页器的使用后端:book_list = models.Book2.objects.all()# 数据总条数all_count = book_list.count()# 当前页current_page = request.GET.get('page',1)# 示例一个...
listview显示分页数据重复
weixin_30413739的博客
10-17 141
============问题描述============ 是单条item数据重复，比如正常显示应该是 item数据1 item数据2 item数据3 item数据4... 这段代码运行 item数据1 item数据1 item数据1 item数据1... （重复数量是网页链接的【pageLines每页显示行数】） ===...
关于django出现重复点击，多事务处理
weixin_30405421的博客
10-31 226
重复点击对处理的时候，可能mysql默认事务是repated处理级别的，会导致读取数据一致带来多次更新。 解决办法： 1.在setting.py里设置更改mysql事务的级别。 2.用select_for_update行级锁。 3，由于django没有代码级设置下一次事务的级别，所以只能自己hack一下django，默认的版本不支持。 转载于:https://www.cnblogs.com...
解决在分页的时候出现重复数据的问题
library_yb的博客
06-14 4094
如果查询条件不正确，就可能会导致查询到的数据不是想要的数据，从而出现重复数据的情况。另外，如果没有正确地设置排序方式，就可能会导致数据的顺序不正确，从而出现重复数据的情况。在分页时，通常是通过查询数据库中的数据，然后根据指定的页码和每页显示的数据条数来获取对应的数据。如果计算起始位置和结束位置的逻辑有误，就可能会导致数据的重复或者遗漏。总之，分页出现重复数据的原因可能是多种多样的，需要仔细检查分页逻辑的实现，确保查询条件、排序方式、起始位置和结束位置等参数的正确性。
rest_framework_django 学习笔记五（过滤、排序、分页）
最新发布
weixin_51715424的博客
11-30 1244
rest_framework_django 过滤、排序、分页
django的分页器Paginator 从django中导入类
09-18
### Django的分页器Paginator详解 #### 一、前言 在Web开发中，当一个列表数据量过大时，为了提升用户体验以及减轻服务器压力，通常会采用分页的方式来展示数据。Django作为一款流行的Python Web框架，内置了强大...
Django1.11自带分页器paginator的使用方法
09-18
Django1.11版本中自带的分页器paginator是一个用于处理分页的工具，它可以在Web应用中实现数据的分页显示，尤其适用于数据量较大时，可以提高页面加载的速度，同时提升用户体验。 Django的分页器核心功能是将数据集...
小白IT：Django框架—分页器paginator
yidianyidei的博客
06-10 788
文章目录一、Django内置paginator分页器1.数据准备models.py文件创建表类在views外使用Django环境创建数据2.paginator对象常用属性和方法paginator对象属性paginator对象的方法page_obj对象的方法3.Django分页器实现分页视图函数部分分页后的前端页面二、自定义分页器CustomerPaginator1.为什么使用自定义分页器2.自定义分页器实例自定义分页器组件自定分页组件使用1.分页器使用2.具体使用实例后端views视图前端使用分页器效果图如
Django-rest-framework框架之过滤排序分页异常处理
qq_59853240的博客
09-20 134
Django-rest-framework框架之过滤排序分页异常处理
order by 导致分页出现重复数据问题
minihuabei的博客
12-25 1448
根据邀请人数倒序后的结果集，然后进行分页会出问题，第2页数据和第三页数据一样 解决方案： SELECT id as invite_id,`invite_num`,`wechat_user_space_id` FROM `ny_invite` WHERE `room_id` = 71391 AND `invite_num` <> 0 ORDER BY invite_num desc,id desc LIMIT 0,5 ; SELECT id as invite_id,`invite_num`...
分页查询出现重复数据
json_li的博客
12-30 1511
使用laravel做分页列表查询接口，每页返回5条数据，发现请求1页，2页最后一条数据出现重复，而总数据量不变，导致有一条数据被覆盖。
jquery.pagination分页反复提交的问题
yuanlintufang的博客
11-12 2293
今天写了一个分页功能，发现页面总是反复提交，后来发现要设置一个选项load_first_page:false,加上后就好了。我用的是jquery-1.9.1.min的版本，jquery.pagination用的最新的，可能与版本有关，这个版本会总动提交。 function handlePaginationClick(new_page_index,pagination_container){ $
jQuery ScrollPagination 自动增加分页及重复加载问题
Goux的专栏
07-06 2190
/* ** Anderson Ferminiano ** contato@andersonferminiano.com -- feel free to contact me for bugs or new implementations. ** jQuery ScrollPagination ** 28th/March/2011 ** http://andersonferminiano.com/j
分页出现数据重复的解决方案
zhqf1989的博客
03-04 1万+
用户量急剧上升中，偶尔会发现这么一个问题，就是下一页的数据中总会出现上一页的几条数据。 为什么会造成这个问题呢？用户在查询第一页的时候，停留了一下，然后在这段时间内 又有两个用户注册了，然后请求第二页的数据的时候 排序的时候 两个新用户排在了最前面(按照注册时间排序) 所以第二次排序的时候就变成了第二页的数据。 那如何解决这个问题呢？ 在每次请求的时候都带上前台最后一条数据的注册时间,然后查...
使用django开发和前端界面进行交互时出现点击某个按钮出现页面数据不显示的情况（动态界面和静态界面）
热门推荐
meto11的博客
08-21 1万+
也许我们在前后端开发的时候会遇到点击某个按钮但是跳转到相应的界面却没有显示相应的内容，只是出现一些空白，没有数据显示，这个可能是我们经常忽略的问题，这是为什么那，其实这个很简单，比如在在一个很简单的登陆注册程序，如果我们注册界面填写信息后，点击注册，这时候我们将表单信息传到后台view.py中进行逻辑处理，这时候我们的url是而我们后台的代码是render()方法的作用---结合一个给定的模板和一...
python django paginator分页
hexiaodouaipiqiu的博客
10-23 3243
python django paginator
django怎么import paginator
06-02
这将导入Django的分页器类Paginator。您可以使用它来轻松地分页查询结果。例如： ```python objects = ['John', 'Jane', 'Bob', 'Alice', 'Jim'] paginator = Paginator(objects, 2) page_obj = paginator.get_page...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值