Django执行定时调度任务出现MySQL server has gone away报错的解决办法

1. 背景

基于Python的第三方库APSchedule,用来提供Python的后台程序,实现每隔24小时调用Django的orm来对数据库进行数据处理。

2. 出现的问题

在间隔24小时之后,执行定时调度的后台线程进行数据库查询时,出现(2006, 'MySQL server has gone away')的报错。

3. 原因排查的过程

结合具体的报错代码段以及参考这两篇博客:[Django1.6]跑批任务错误(2006, ‘MySQL server has gone away’)MySQL server has gone away 设置mysql连接自动断开,初步判断是由于长时间没有操作数据库导致连接被数据库断开而导致的报错。

因为Mysql的wait_timeout默认是8个小时,而我项目中定时任务是24小时执行一次,且一次执行需要的时间是几分钟不到,当第一次执行的时候,Django和Mysql建立的一个连接会自动保持8小时的连接,但是8小时之后Mysql会断开这个连接,而第二次执行任务的时候Django还用上次的连接去连接mysql,因此得到一个gone away的结果。

4. 解决方案

  • 在Django进行数据库处理之前,就主动关闭Django到Mysql的数据库连接,然后重新建立一个来查询。

    from django.db import connection
    
    def is_connection_usable():
      try:
        connection.connection.ping()
      except:
        return False
      else:
        return True
    
    def do_work():
      if not is_connection_usable():
          connection.close()
      try:
          pass //执行数据库相关操作
      except:
          logger.exception("Something bad happened, trying again")
          sleep(1)
    
  • 在数据库的配置文件内配置超时时间wait_timeout,默认为8小时,但是这种方案不推荐。
    也有说可以在Django的DATABASES里面配置CONN_MAX_AGE,但是CONN_MAX_AGE的值不能大于数据库服务器的wait_timeout的值,该值表示的是在数据库默认连接超时时间之前,数据库真正关闭连接的时长。所以在数据库服务器的wait_timeout的值未修改的前提下,修改此值意义不大。


参考资料:
Django数据库连接
[Django1.6]跑批任务错误(2006, ‘MySQL server has gone away’)
MySQL server has gone away 设置mysql连接自动断开

  • 2
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
当遇到"Django 'MySQL server has gone away'"错误时,通常是由于数据库连接断开导致的。这个错误通常发生在长时间没有操作数据库的情况下,MySQL服务器会自动断开连接以保护资源。 解决这个问题的一个方法是在进行数据库处理之前,主动关闭DjangoMySQL的数据库连接,然后重新建立一个新的连接来查询。这样可以确保每次操作都使用一个新的连接,避免使用已经断开的连接导致错误。 另外,MySQL的默认wait_timeout是8个小时,这意味着如果一个连接在8小时内没有活动,MySQL会自动断开该连接。对于定时任务而言,如果任务执行时间很短,那么在第一次执行后,DjangoMySQL建立的连接会自动保持8小时的连接,但是在8小时之后,MySQL会断开连接。所以当再次执行任务时,Django仍然使用上次的连接去连接MySQL,从而导致'MySQL server has gone away'的错误。 因此,解决这个问题的一种方法是在每次执行任务之前,都重新建立一个新的数据库连接,以避免使用已断开的连接。这可以通过在任务执行前关闭旧连接,并在执行任务时建立一个新的连接来实现。这样可以确保每次任务都使用一个新的、有效的数据库连接。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [解决Django执行定时调度出现MySQL server has gone away](https://blog.csdn.net/sishi22/article/details/127805741)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] - *2* [Django-apschedulermysql server has gone away” solution](https://blog.csdn.net/weixin_45167303/article/details/122955174)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值