Django默认每访问一次数据库都会创建一个新的数据库连接,执行完数据库操作后再关闭连接。这在高并发的场景下会导致连接数不断增多,最终出现“too many connections”错误。
如果我们使用gunicorn的gevent模式运行项目,那么不能在项目中使用threading(多线程)模块进行数据库操作。因为gevent会给threading模块动态打补丁,这会导致数据库连接无法复用,出现“too many connections”错误。
要解决以上问题,我们需要实现一个数据库的连接池。实现连接池的方法参考了https://yunsonbai.top/2017/07/02/gunicorn-gevent-django/,这里做了一些调优。实现的步骤如下:
1. 在项目的settings.py中配置数据库连接参数,使用自定义的数据库引擎
DATABASES = {
'default': {
'ENGINE': 'myproject.mysql', # 注意这里必须是.mysql结尾
'POOL_SIZE': 20, # 每个进程的连接池的大小,总连接数=20*总进程数
'NAME': 'test',
'USER': 'root',
'HOST': '127.0.0.1',
'PASSWORD': '******',
'STORAGE_ENGINE': 'INNODB',
'PORT': '3306',