Django数据库访问性能优化
digwtx 2013-01-25 21:29 829
Django的数据库层提供了很多方法来优化数据库访问的性能,这篇文章将集中介绍这方面的内容。
1.使用标准的数据库优化技术
在进行Django数据库访问性能优化之前,首先应该使用标准的数据库技术对其进行优化,比如给字段加索引,通过使用django.db.models.Field.db_index 来给一个Django模型类的字段加索引,设置这个属性字段的Field.db_index=True。
注:django对model中的fk和unique = True的字段将自动创建索引。
2.理解Django中QuerySet的工作机制对数据库访问优化至关重要:
1)QuerySet是懒加载的;
2)QuerySet只有在需要的时候才会被执行;
3)QuerySet执行后,其结果是保存在内存中的。
3.理解Django中QuerySet的缓存机制
QuerySet对调用方法是不执行缓存的。比如下面的两端代码,其中一个会被缓存,另一个不会:
>>> entry = Entry.objects.get(id=1)
>>> entry.blog # Blog对象会被从数据库查询出来
>>> entry.blog # 第二次访问的缓存对象,不会再次执行查询
但是对于调用的查询方法,是不会被缓存的:
>>> entry = Entry.objects.get(id=1)
>>> entry.authors.all() # 第一次会执行查询
>>> entry.authors.all() # 第二次会再执行一次查询
4.使用模板语言中的with标签
在视图模板中,针对QuerySet对象使用with标签
5.使用iterator()方法
对于缓存的QuerySet使用iterator()方法
6.将查询计算操作放在数据库中完成,不要在Python代码中完成。
1)使用filter,exclude完成查询过滤;
2) F()查询表达式;
3) 使用聚合函数来完成数据库聚合操作。
7.使用QuerySet.extra()明确的指出要查询的字段
8.使用原生SQL查询:对于复杂的数据库查询操作,使用原生SQL实现。
9.尽量一次查询出所有需要的信息
10.理解 QuerySet.select_related()方法,并尽量使用它。
11.只查询需要的数据
1)某些情况下,只使用 QuerySet.values()和 values_list()方法,查询出符合条件的结果集而不是完整的对象结果集;
2)某些情况下,只使用 QuerySet.defer() 和 only()过滤数据。
12.如果只是查询集合的数量,使用QuerySet.count()函数,而不是len(QuerySet)
13.如果想知道某个记录是否包含在某个结果集中,使用 QuerySet.exists()函数
14.避免过多的使用count() 和 exists()函数,比如下面的代码:
{% if display_inbox %} {% with emails=user.emails.all %} {% if emails %} <p>You have {{ emails|length }} email(s)</p> {% for email in emails %} <p>{{ email.body }}</p> {% endfor %} {% else %} <p>No messages today.</p> {% endif %} {% endwith %} {% endif %}
这样做的好处是:
1) 如果display_inbox=False,则不必做查询;
2) 针对user.emails.all使用with标签,可以让数据被缓存起来使用;
3){% if emails %} 会导致 QuerySet.__nonzero__()被调用,进而导致user.emails.all() 被调用;
4) {{ emails|length }}会导致 QuerySet.__len__()被调用,这样可以使用缓存的QuerySet;
5) for循环可以通过迭代来使用缓存的结果。
15.对于批量更新和删除操作使用 QuerySet.update() 和 QuerySet.delete()
16.如果需要查询对象的外键,则使用外键字段而不是使用关联的对象的主键,比如:
>>>entry.blog_id #应该使用这种方式 >>>entry.blog.id #不要使用这种方式