记一次django中多线程执行sql的坑

由于项目中的一个接口需要多次调用数据库查询,这种逻辑上没有办法优化,必须查询多次,响应时间1200ms,因此决定优化。
优化方法,通过多线程连接数据库进行异步查询。
项目中与mysql连接使用的是django封装好的django.db.connection。代码运行报错:

Exception in thread Thread-7261:
Traceback (most recent call last):
  File "C:\Users\UCS-TREMBLE\AppData\Local\Programs\Python\Python36-32\lib\threading.py", line 916, in _bootstrap_inner
    self.run()
  File "C:\Users\UCS-TREMBLE\AppData\Local\Programs\Python\Python36-32\lib\threading.py", line 864, in run
    self._target(*self._args, **self._kwargs)
  File "D:/python/github/SpiderInfo/Maoyan/getPage.py", line 579, in execSQL
    res = cur.fetchall()
  File "C:\Users\UCS-TREMBLE\AppData\Local\Programs\Python\Python36-32\lib\site-packages\pymysql\cursors.py", line 295, in fetchall
    self._check_executed()
  File "C:\Users\UCS-TREMBLE\AppData\Local\Programs\Python\Python36-32\lib\site-packages\pymysql\cursors.py", line 75, in _check_executed
    raise err.ProgrammingError("execute() first")
pymysql.err.ProgrammingError: execute() first

错误分析:
django里封装好的数据库连接是放在线程的 local() 实例中的,每个请求有且只有一个,需要使用时创建,请求完成关闭。因而在我的代码中每个子线程都创建一个连接使用行不通。
解决办法:
使用原生的pymysql进行数据库连接,绕过django的限制。
pymysql的使用方法很简单,注意的是可以通过django.conf导入setting读取数据库配置参数创建conn。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值