涉及知识点:
- 装饰器的简单使用
- 内置性能检测模块:cProfile
- 第三方性能插件:django-debug-toolbar
- django中orm查询的外键N+1问题
1.装饰器统计函数执行时间
import time, requests
# 统计函数执行时间的装饰器
def time_it(func):
def wrapper(*args, **kwargs):
start = time.time()
result = func(*args, **kwargs)
print(func.__name__, 'cost:', time.time()-start)
return result
return wrapper
@time_it
def fetch_page(url):
requests.get(url)
fetch_page('https://www.baidu.com')
2.函数性能检测工具profile
import cProfile
def loop(count):
result = []
for i in range(count):
result.append(i)
cProfile.run('loop(1000)')
输出函数总共被调用的次数和耗费时间
3.django第三方性能排查插件django-debug-toolbar
1.基础配置
安装:pip install django-debug-toolbar==1.9.1
settings/develop.py
# 配置第三方性能优化插件:django-debug-toolbar
# 该工具只能在开发和测试阶段使用,只有在DEBUG=True时才会生效
# 因此添加在develop.py而不是base.py
INSTALLED_APPS += [
'debug_toolbar',
]
MIDDLEWARE += [
'debug_toolbar.middleware.DebugToolbarMiddleware',
]
INTERNAL_IPS = ['127.0.0.1',]
# 工具的显示依赖jquery,如果前端无法显示可手动配置jquery地址
DEBUG_TOOLBAR_CONFIG = {
'JQUERY_URL': '/static/js/jquery3.4.1.js',
# 'JQUERY_URL': '//cdn.bootcss.com/jquery/2.1.4/jquery.min.js',
# 'SHOW_COLLAPSED': True,
# 'SHOW_TOOLBAR_CALLBACK': lambda x: True,
}
2.配置 urls.py
# 在DEBUG=True时配置调试工具的url接口
if settings.DEBUG:
import debug_toolbar
urlpatterns = [
url(r'^__debug__/', include(debug_toolbar.urls)),
] + urlpatterns
3.SQL查询优化
SQL板块中会显示数据库查询次数和重复请求次数
大部分的重复请求都在模板中产生,也就是外键的N+1问题
orm查询时使用select_related方法可解决一对一和一对多的外键关联
prefetch_related方法针对多对多,示例:
posts = Post.objects.all()
for post in posts: # 产生数据库查询
print(post.owner.name) # 产生额外的数据库查询
# 解决方法:产生数据库查询时会将外键owner对应的数据也一同查出来
posts = Post.objects.all().select_related('owner')
针对博客项目的优化:列表页和详情页需要post中外键对应的数据,而侧边栏中则不需要,因此修改latest_posts方法
class Post(models.Model):
# ...
# with_related:不用显示外键数据时传入False
@classmethod
def latest_posts(cls, with_related=True):
queryset = cls.objects.filter(status=Post.STATUS_NORMAL)
# 解决外键引起的N+1问题,查询时一并查出外键对应的数据
if with_related:
queryset.select_related("owner", 'category')
return queryset
参考:《django企业开发实战》