python django开发新闻聚合检索推荐_Django model 层之聚合查询总结

最新推荐文章于 2022-08-04 14:39:22 发布
最新推荐文章于 2022-08-04 14:39:22 发布
阅读量84 收藏 1
点赞数
文章标签： python django开发新闻聚合检索推荐

Django model层之聚合查询总结

by:授客QQ：1033553122

实践环境

Python版本：python-3.4.0.amd64

Win7 64位

Django  1.11.4

聚合查询

MySQL数据库为例,假设项目目录结构如下：

mysite/

myapp/

__init__.py

admin.py

apps.py

migrations/

__init__.py

models.py

tests.py

views.py

manage.py

mysite/

__init__.py

settings.py

urls.py

wsgi.py

models.py内容如下：

fromdjango.db importmodels

# Create your models

here.

class

Person(models.Model):

first_name = models.CharField(max_length=30)

last_name = models.CharField(max_length=30)

class Book(models.Model):

book_name = models.CharField(max_length=30)

borrower = models.ForeignKey(Person,

to_field='id', on_delete=models.CASCADE)

class

Store(models.Model):

id = models.AutoField(primary_key=True)

name = models.CharField(max_length=50)

last_update =

models.DateField(auto_now=True)

class

Production_addr(models.Model):

addr = models.CharField(max_length=50)

distance = models.IntegerField()

class

Fruit(models.Model):

store = models.ManyToManyField(Store)

production_addr =

models.ForeignKey(Production_addr, to_field='id', on_delete=models.CASCADE)

name = models.CharField(max_length=100)

onsale_date = models.DateField()

price = models.IntegerField()

class

Taste(models.Model):

taste = models.CharField(max_length=50)

fruit=models.ManyToManyField(Fruit)

class

News(models.Model):

title = models.CharField(max_length=20)

n_comments = models.IntegerField()

n_pingbacks = models.IntegerField()

rank = models.IntegerField()

class Blog(Book):

author = models.CharField(max_length=50)

针对整个QuerySet生成聚合

例：查询myapp_news表中，rank值大于26的记录，其n_comments平均值

>>> from myapp.models import News

>>> from django.db.models

import Avg

>>>

News.objects.filter(rank__gt=26).aggregate(Avg('n_comments'))

{'n_comments__avg': 17.0}

如果是针对所有记录求均值，我们可以这样

>>>

News.objects.all().aggregate(Avg('n_comments'))

{'n_comments__avg': 23.0}

也可以去掉all()

>>>

News.objects.aggregate(Avg('n_comments'))

{'n_comments__avg': 23.0}

返回结果说明

{'聚合结果值标识':'聚合结果值'}

自定义聚合结果标识

>>> News.objects.all().aggregate(average_price

= Avg('n_comments'))

{'average_price': 23.0}

>>> from django.db.models

import Avg, Max, Min

>>>

News.objects.aggregate(Avg('n_comments'), Max('n_comments'), Min('n_comments'))

{'n_comments__max': 35, 'n_comments__min': 14,

'n_comments__avg': 23.0}

针对整个QuerySet的每项生成聚合

可以理解为mysql中的分组统计，Model.objects.annotate(……) ，不过不一样的是，这里没有指定分组字段，是按每个model对象分组。

例子：Fruit和Store model存在多对多关系。现在需要查询，myapp_fruit表中某条记录(可以理解为每类水果)，有多少家商店在出(myapp_store表中每条记录对应一个商店)

>>> from myapp.models import Fruit,

Production_addr, Store, Taste

>>> from django.db.models

import Count

>>> q =

Fruit.objects.annotate(Count('store'))

>>> q[0]

>>> q[0].store__count

1

>>> q[1].store__count

3

>>> q[2].store__count

1

默认的，annotation标识由aggregate函数及被聚合field而来(例中为store__count)，类似aggregate, 可以自定义annotation标识

>>> q =

Fruit.objects.annotate(store_num = Count('store'))

>>> q[0].store_num

1

>>>

和aggregate不同的是,annotate()语句输出结果为QuerySet,支持其它QuerySet操作，包括filter(),order_by()，甚至是再次调用annotate()

>>> q =

Fruit.objects.annotate(store_num = Count('store')).filter(id__gt=3)

>>> q[0]

>>> q[0].store_num

3

混用多个聚合函数

使用annotate()函数，混用多个聚合函数，会返回错误的结果，因为实现使用的是join查询，而非子查询。针对count聚合函数，可以使用distinct=True参数避免这个问题

例子：检索myapp_fruit表中第一个条记录，查询出售该类水果的商店数及该类水果的口味总数。

>>> fruit = Fruit.objects.first()

>>> fruit.store.count()

2

>>> fruit.taste_set.count()

3

>>> from django.db.models import Count

>>> q = Fruit.objects.annotate(Count('store'),

Count('taste'))

>>> q[0].store__count

6

>>> q[0].taste__count

6

解决方法：

>>> q = Fruit.objects.annotate(Count('store',

distinct=True), Count('taste', distinct=True))

>>> q[0].taste__count

3

>>> q[0].store__count

2

>>>

联合查询与聚合

有时候，需要获取和当前正在查询模块关联的另一个模块的相关聚合值，这个时候，可在聚合函数中，指定字段使用双下划线方式，关联相关模块进行join查询

例子：检索myapp_store表,查询每个商店正在出售水果种类中，最高价和最低价。

>>> q = Store.objects.annotate(min_price=Min('fruit__price'),

max_price=Max('fruit__price'))

>>> for item in q:

...

print(item.min_price, item.max_price)

...

10 20

19 20

None None

None None

None None

None None

联合查询的深度取决于你的查询要求。

例子：检索myapp_store表,查询每个商店正在出售水果种类中，产地最远是多远。

>>> from django.db.models import Min, Max

>>> q = Store.objects.annotate(max_distance=

Min('fruit__production_addr__distance'))

>>> for item in q:

...

print(item.name, item.max_distance)

...

aimi 40

ximi 20

xima None

masu None

gami None

gama None

反向关联查询

例：查询每个产地的水果种类数量(myapp_production_addr.id是myapp_fruit表的外键)

>>> q =

Production_addr.objects.annotate(cnt=Count('fruit'))

>>> for item in q:

...

print(item.addr, item.cnt)

...

changting 1

shanghang 1

longyan 1

例，检索所有产地产出的水果种类，最小价格

>>> q =

Production_addr.objects.aggregate(min_price=Min('fruit__price'))

>>> print(q)

{'min_price': 10}

对比(分组统计)：

>>> q =

Production_addr.objects.annotate(min_price=Min('fruit__price'))

>>> for item in q:

...

print(item.addr, item.min_price)

...

changting 20

shanghang 16

longyan 10

不仅仅是针对外键，针对多对多关系也可以

>>> from django.db.models

import Avg

>>> q =

Taste.objects.annotate(avg_price=Avg('fruit__price'))

>>> for item in q:

...

print(item.taste, item.avg_price)

...

sour 20.0

sweet 20.0

bitter 20.0

聚合及其它QuerySet语句

filter()和exclude()

例子:统计myapp_fruit表中banana除外的水果种类的最小价

>>>

Fruit.objects.exclude(name='banana').aggregate(Min('price'))

{'price__min': 16}

filter也支持类似用法

Filtering on annotations

例子：检索myapp_store表,查询每个商店正在出售水果种类中最低价，过滤最低价小于等于10的。

>>>

Store.objects.annotate(min_price=Min('fruit__price')).filter(min_price__gt=10)

说明：先执行annotate,得到结果集，然后执行filter语句，得出结果。

注意：annotations和filter()、exclude()语句是有先后顺序之分的，后一步的处理依赖前一步的结果，顺序不一样，结果可能也会也不一样。

order_by()

例子：检索myapp_store表,查询每个商店正在出售水果种类中最低价，并按最低价升许排序。

>>>

Store.objects.annotate(min_price=Min('fruit__price')).order_by('min_price')

,

Store object>, ,,

, ]>

values()

values()结合annotate的使用

例子：检索myapp_store表，按商店名称分组查询商店正在出售水果种类中最低价

>>>

Store.objects.values('name').annotate(min_price=Min('fruit__price'))

{'min_price': 19, 'name': 'ximi'}, {'min_price': None, 'name': 'xima'},

{'min_price': None, 'name': 'masu'}, {'min_price': None, 'name': 'gami'},

{'min_price': None, 'name': 'gama'}]>

>>>

可以理解为mysql中的分组统计，values('filed')中指定filed即为分组统计字段

注意：类似filter()，values和annotate也有先后顺序之分。

annotate和aggregate配合使用

例：

>>> Store.objects.values('name').annotate(min_price=Min('fruit__price')).aggregate(Avg('min_price'))

{'min_price__avg': 14.5}

说明，链式处理

其它例子

from django.db.models import Count, Avg, Max, Min, Sum

v

= models.UserInfo.objects.values('u_id').annotate(uid=Count('u_id'))

#

SELECT u_id, COUNT(ui) AS `uid` FROM UserInfo GROUP BY u_id

v=

models.UserInfo.objects.values('u_id').annotate(uid=Count('u_id')).filter(uid__gt=1)

#

SELECT u_id, COUNT(ui_id) AS `uid` FROM UserInfo GROUP BY u_id having

count(u_id) > 1

v

=

models.UserInfo.objects.values('u_id').annotate(uid=Count('u_id',distinct=True)).filter(uid__gt=1)

#

SELECT u_id, COUNT( DISTINCT ui_id) AS `uid` FROM UserInfo GROUP BY u_id having

count(u_id) > 1

更多详情，参考链接：

weixin_39713219
关注
django mysql去重_关于Django中的数据库操作API之distinct去重的一个误传 | Less is More...
weixin_32593721的博客
02-07 497
最近在做一个Server的项目，后台框架是Apache mod_wsgi + django。django是一个基于Python的Web开发框架，功能十分强大，至于有多强大，还是读者们自己去体验吧。我在这里要说的一个问题是关于Python的ORM功能的。问题就在django提供的数据库操作API中的distinct()函数，了解SQL语句的读者都应该知道，DISTINCT关键字可以在select操作...
python-django_多表操作_聚合查询_分组查询_F和Q查询_原生sql_defer和only_事务
qq_31455841的博客
10-15 655
django 多表操作 1. 聚合查询 # 聚合查询（聚合函数：最大，最小，和，平均，总个数）aggregate from django.db.models import Avg,Max,Min,Count,Sum 1. 计算所有图书的平均价格 # aggregate结束，已经不是queryset对象了 book=models.Book.objects.all().aggregate(Avg('price')) # 起别名 book=models.Book.objects.
python django开发新闻聚合检索推荐_python - django (查询、聚合、分组)
weixin_39854326的博客
12-09 81
#"""---- 正向查询按字段，反向查询按表名一： 一对多正向查询：(字段对象.关联表.查询字段)x_obj = models.Book.objects.filter(xxx).first()x_obj.publish.email反向查询：(字段对象.要查询的表名小写_set.all())x_obj = models.Publish.objects.filter(xxx).first()for...
python数据分组聚合案例_Django分组聚合查询实例分享
weixin_39824033的博客
12-03 440
多表查询1. 增删改一对多：先一后多，外键可以为对象或依赖表的主键(publish and book)publish = Publish.objects.create()Book.objects.create(....publish=publish|publish_id=publish.id)删： 默认存在级联删除改： book修改外键，外键一定存在多对多：关系表的获取(book(主键) and ...
python django开发新闻聚合检索推荐_Django分组聚合查询实例分享
weixin_39969448的博客
12-09 60
多表查询1. 增删改一对多：先一后多，外键可以为对象或依赖表的主键(publish and book)publish = Publish.objects.create()Book.objects.create(....publish=publish|publish_id=publish.id)删： 默认存在级联删除改： book修改外键，外键一定存在多对多：关系表的获取(book(主键) and ...
python django开发新闻聚合检索推荐_Django之聚合查询、分组查询、查询优化以及F、Q查询...
weixin_39845430的博客
12-09 111
目 录前言：以下操作的数据库表模型如下(app01下的models.py)：from django.db importmodels#Create your models here.#自定义char类型classMyCharField(models.Field):def __init__(self,max_length,*args,**kwargs):self.max_length=max_len...
python django开发新闻聚合检索推荐_Django查询以检索符合相关选项卡上聚合条件的行...
weixin_32495691的博客
02-09 78
我真的被一个Django查询困住了，希望你有几分钟时间来帮我弄清楚。在我有一个非常简单的模型：class Task(models.Model):# a tuple representing a specific item to be searched for a specific URLinstructions = models.TextField()ASSIGNMENT_STATUS_CHOIC...
python爬虫 django搜索修改更新数据_一文搞懂Django数据库查询操作
weixin_29960041的博客
02-04 375
本文略长,读完约需十分钟。当做复习笔记效果更佳。查询操作：数据查询是数据库操作中一个非常重要的技术。查询一般就是使用filter、exclude以及get三个方法来实现。我们可以在调用这些方法的时候传递不同的参数来实现查询需求。在ORM层面，这些查询条件都是使用field+__+condition的方式来使用的。以下将那些常用的查询条件来一一解释。1.exact：在底层会被翻译成=。使用精确的=进...
python django orm查询集总结
风随海飞扬
01-11 901
1 .什么是ORM (Object Relational Mapping ) 它的作用是在关系型数据库和业务实体对象做一个映射，我们在操作具体业务对象的时候就可以省去了和SQL语句打交道，只需要简单的操作对象的属性和方法。 我们在model这个模块写的类名相当于数据库中的表名 根据这个类创建的对象相当于数据库表中的一个字段 字段名.id ,字段名2.title 表示这个字段对对应的数据 模型与模型之间的关系 1.多对一关系 举个列子 一个出版社出于版权问题，一本书只能由一个出版社出版，但是出版社可以有多本
Django的ORM常用查询操作总结.txt
06-06
### Django ORM 常用查询操作总结 #### 一、模型定义 首先，我们来看一个简单的`Student`模型示例： ```python class Student(models.Model): name = models.CharField(max_length=10) sex = models....
django开发中文版资料
03-01
- **Django**是一款开源的Web应用框架，采用Python语言编写，遵循MVC（Model-View-Controller）设计模式。 - **目标用户**：对于初学者和有经验的开发者都非常友好，旨在简化开发流程、提高开发效率。 #### 新手...
在Python的Django框架中显示对象子集的方法
09-21
在Python的Django框架中，显示对象子集是通过使用QuerySet API来实现的，它提供了灵活且高效的方式来检索和操作数据库中的数据。QuerySet是Django ORM（对象关系映射）的核心部分，用于处理数据库查询。让我们深入...
自学Python第二十二天- Django框架(一)创建项目、APP、快速上手、请求和响应流程、模板、数据库操作
runsong911的博客
08-04 2879
自学Python第二十二天- Django框架
飞翔的小鸟 scratch
最新发布
10-06
飞翔的小鸟 scratch
ANALOG DESIGN ESSENTIALS
10-06
ANALOG DESIGN ESSENTIALS
企事业单位知识竞赛答题小程序v2023.10
10-06
企事业单位知识竞赛答题小程序，在信息技术迅猛发展的时代，企业和事业单位在提升员工素质和知识水平方面面临着新的挑战。为了增强员工的学习积极性、提高团队凝聚力和整体素质，越来越多的单位开始组织知识竞赛活动。传统的知识竞赛往往依赖于线下纸质问卷，不仅耗时耗力，还难以及时统计结果。因此知识竞赛答题小程序，能够通过数字化手段提升竞赛的效率和互动性
仿小米的Disucz模板
10-06
整套模板是忽悠兄原创设计开发，这是一款简约大气的模板，保留Discuz预留功能， 必须一键式配置完成，使用插件配置到位，专业的网站肯定不使用DIY啦，二次开发了大部分功能， 更强大，别人几百才有的功能，这里直接免费，最重要的是还比别人的强大！这还是一款， 永久免费包更新的模板。（当然不包技术服务），一个残余代码都不留， 代码简洁无压力，跑起来更轻快，自行开发更自信。（强迫症福利）
IP-ISP (图像信号处理) 产品介绍 ISP实现了对图像的bayer转RGB、自动白平衡、自动曝光、自动对焦评估、坏点去除、
10-06
IP-ISP (图像信号处理) 产品介绍 ISP实现了对图像的bayer转RGB、自动白平衡、自动曝光、自动对焦评估、坏点去除、降噪、最大值滤波、中值滤波、最小值滤波、均值滤波、gamma校正、数字增益等功能，这里面的每种功能都可以进行单独的控制;其中自动对焦的清晰度评估功能，用户需要根据该清晰度自行调节可调焦镜头的焦距能;自动曝光功能也只是计算出图像的亮度，用户需要根据该亮度自行调节sensor的曝光量。 产品特性 支持 BAYER 转RGB，采用双线性内插值法，可选3*3和5*5两种插值精度 支持各种常用滤波器，如最大值、最小值、中值、均值，滤波窗口为3*3像素 支持自动白平衡、自动曝光、自动对焦算法 支持处理RGB图像或者灰度图像 支持处理任意分辨率的图像 像素数据位宽支持8 10 12位 可处理图像的分辨率和帧率取决于时钟频率，可支持720P-60fps、1080-30fps及更高规格 支持时钟频率大于100MHz 可提供网表或源码 已在KC705上完成质验证工作 器件系列支持 Virtex-7 Kintex-7 Artix-7 Spartan-6 设计工具支持 Vivado
Python库django_ya_model_publisher安装指南
资源摘要信息:"django_ya_model_publisher-0.6.2-py3.5.egg是一个专门为Django框架定制的Python库，它的版本号为0.6.2，适用于Python 3.5。这个库是在官方环境下发布的。使用该资源前需要先将其解压。安装方法可以...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值