关于python使用DBUtils建立连接池连接数据库报错pymysql.err.OperationalError: (2014, 'Command Out of Sync')

最新推荐文章于 2024-07-30 21:09:58 发布
置顶 最新推荐文章于 2024-07-30 21:09:58 发布
阅读量2k 收藏
点赞数
文章标签： python DBUtils mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44816899/article/details/102565418
版权

我的爬虫程序使用了DBUtils建立了数据库连接池，目前在windows上运行没有问题，但在centos上运行会出现如下报错，困扰了两天了，特发此贴请教下各位大佬，感激不尽

Traceback (most recent call last):
  File "/usr/lib64/python3.6/multiprocessing/process.py", line 258, in _bootstrap
    self.run()
  File "/usr/lib64/python3.6/multiprocessing/process.py", line 93, in run
    self._target(*self._args, **self._kwargs)
  File "/home/wwwroot/TSpider/spider/main_spider.py", line 358, in run_spider
    user_spider(sec_uid)
  File "/home/wwwroot/TSpider/spider/main_spider.py", line 54, in user_spider
    user_handler(user, db)
  File "/home/wwwroot/TSpider/public/common.py", line 853, in user_handler
    db.insert(insert_user, nickname)
  File "/home/wwwroot/TSpider/public/db_con.py", line 88, in insert
    return self.__edit(sql, log)
  File "/home/wwwroot/TSpider/public/db_con.py", line 102, in __edit
    self.db.begin()
  File 
最低0.47元/天 解锁文章
terryoyty_python
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 6
    评论
python 多进程共享数据库连接池_python 多线程 + DBUtils连接池操作数据库（附python之GIL）...
weixin_39867125的博客
12-15 773
import os,threadingfrom DBUtils.PooledDB import PooledDBimport pymysql,random,timefrom queue import Queue# from twisted.enterprise import adbapi# from twisted.internet import reactor# 创建一个有10个连接的mysql...
【解决】python连接mysql数据库过段时间就会断开pymysql.err.OperationalError
热门推荐
xiaoxin_OK的博客
07-30 1万+
问题： 1.python中的数据库连接没有长连接的概念，之前我就踩过这个坑：用最基础的连接方法连接mysql数据库，然后往数据库插入数据，过一会儿就报错了（错误的代码我忘了，后面有遇到场景再重现一下），大概的意思是数据库连接已断开。 2.python基础连接方式进行数据库连接及增删改查操作，每次连接mysql请求时，都是独立的去请求访问，比较浪费资源，而且访问数量达到一定数量时，对mysql的性能会产生较大的影响。 解决办法： 问题1中如果不在意数据库性能的话最简单的就是简单预处理一下： try:
Python 使用DBUtils 创建连接池解决多线程中连接丢失的问题
Lucky小黄人的博客
07-24 1385
转自：Python 使用 PyMysql、DBUtils 创建连接池，提升性能和python多线程操作数据库问题 python多线程并发操作数据库，会存在链接数据库超时、数据库连接丢失、数据库操作超时等问题。 解决方法：使用数据库连接池，并且每次操作都从数据库连接池获取数据库操作句柄，操作完关闭连接返回数据库连接池。 *连接数据库需要设置charset = 'utf8', use_unico...
PyMySQL连接池
消极的人永远是对的，积极的人选择勇往直前
05-29 1053
胡乱抄的，等待实操检验
python的DBUtils连接mysql数据库时报错：2006, 'SSL connection error: SSL_CTX_set_tmp_dh failed'
Daletxt的博客
01-08 2823
如下会打开一个mysql数据库连接池会报错： _mysql_exceptions.OperationalError: (2006, 'SSL connection error: SSL_CTX_set_tmp_dh failed') import MySQLdb from MySQLdb.cursors import DictCursor from DBUtils.PooledDB impo...
Python-DBUtils 使用mysql数据库连接池提升效率
人言落日是天涯，望极天涯不见家。
03-04 537
随着全网扫描项目的开发，越来越细致的问题暴露出来，从能用到用的好，还有很长的路要走。 这个问题前段时间就发现了，程序一般跑个一天会越来越慢，直到某个时候程序彻底崩了，而且最后的报错也一般是mysql的报错： pymysql.err.OperationalError: (2013, 'Lost connection to MySQL server during query ([Errno 10...
python连接池 commit_Python3 多线程(连接池)操作MySQL插入数据
weixin_39863918的博客
12-15 551
1.主要模块DBUtils : 允许在多线程应用和数据库之间连接的模块套件Threading : 提供多线程功能2.创建连接池PooledDB 基本参数：mincached : 最少的空闲连接数，如果空闲连接数小于这个数，Pool自动创建新连接;maxcached : 最大的空闲连接数，如果空闲连接数大于这个数，Pool则关闭空闲连接;maxconnections : 最大的连接数;blockin...
使用Python DBUtils构建MySQL数据库连接池
李谦的博客
05-23 2160
DBUtils能给我们提供稳定、持久和可共享的数据库连接池，也能让我们避免很多数据库异常情况的出现，提高数据库访问的效率。 1. 引子 如果你经常使用Python pymysql来操作MySQL数据库，那么一定对以下异常有几分眼熟： 1.1. Error code: 2013 pymysql.err.OperationalError: (2013, 'Lost connection to ...
python多线程写入数据库_Python3 多线程(连接池)操作MySQL插入数据
weixin_39863631的博客
11-28 677
1.主要模块DBUtils : 允许在多线程应用和数据库之间连接的模块套件Threading : 提供多线程功能2.创建连接池PooledDB 基本参数：mincached : 最少的空闲连接数，如果空闲连接数小于这个数，Pool自动创建新连接;maxcached : 最大的空闲连接数，如果空闲连接数大于这个数，Pool则关闭空闲连接;maxconnections : 最大的连接数;blockin...
Python 使用 PyMysql、DBUtils 创建连接池提升性能
01-01
Python 编程中可以使用 PyMysql 进行数据库的连接及诸如查询/插入/更新等操作，但是每次连接 MySQL 数据库请求时，都是独立的去请求访问，相当浪费资源，而且访问数量达到一定数量时，对 mysql 的性能会产生较大的...
Flask框架使用DBUtils模块连接数据库操作示例
12-25
本文实例讲述了Flask框架使用DBUtils模块连接数据库的操作方法。分享给大家供大家参考，具体如下： Flask连接数据库 数据库连接池： Django使用:django ORM(pymysql/MySqldb) Flask/其他使用：  -原生SQL  -...
使用dbutils获取tomcat数据库连接池.pdf
09-29
【使用dbutils获取tomcat数据库连接池】 Apache Commons DBUtils是一个轻量级的Java库，它简化了对JDBC API的使用，通过提供一个抽象层来处理常见的数据库操作，如查询、更新等，从而减少代码量和出错的可能性。本...
连接池jar包.rar
10-22
标题提到的"连接池jar包.rar"是一个包含数据库连接池相关库的压缩文件，主要用于提高应用程序处理数据库连接的效率。 这个压缩包中的关键组件是`commons-dbutils-druid-1.1.20.jar`，它是Apache Commons DbUtils和...
【Python】pandas：排序、重复值、缺省值处理、合并、分组
yannan20190313的博客
07-30 510
【Python】pandas：排序（sort_index,sort_values,nsmallest,nlargest）、重复值（duplicated,drop_duplicates,value_counts,nunique）、缺省值处理（isna,isnull,notna,notnull,fillna,dropna,replace）、合并（join,merge,append,concat）、分组（groupby）
快醒醒，别睡了!...讲《数据分析pandas库》了—/—＜4＞
qq_64603703的博客
07-27 997
详细解说数据分析pandas库中的常用方法
全网最详细Gradio教程系列5——Gradio Client: python
shao918516的博客
07-26 1093
程序部署完成后，如何将Gradio App作为API访问使用呢，这就用到Gradio Client。本章讲解Gradio Client的三种使用方式：python、javascript和curl，受字数限制，所以分三篇博客发布。 使用Gradio Python Client非常易于将Gradio应用程序作为API使用，本节讲述gradio_client安装、如何连接Gradio应用程序、查看可用API及其使用方式、job及session等用法。 通过Gradio Python Cli
Selenium与WebDriver：Errno 8 Exec格式错误的多种解决方案
ip16yun的博客
07-30 271
在使用Selenium和WebDriver进行网页自动化时，可能会遇到各种错误。其中一个常见问题是执行格式错误（Errno 8 Exec format error）。这个错误通常在运行ChromeDriver时出现，错误提示涉及路径中的某个文件。本文将概述这个问题的背景，并提供多种解决方案，包括如何使用代理IP技术进行数据抓取。
十个好用到爆炸的Python技巧
最新发布
qq_36807888的博客
07-30 523
生成器表达式与列表推导式类似，但它创建的是一个迭代器，而不是一个完整的列表。zip(names, ages) 创建一个迭代器，该迭代器生成由 names 和 ages 列表中对应位置的元素组成的元组。defaultdict(int) 创建一个字典，如果访问的键不存在，则默认值为 0 (int 类型的默认值)。惰性求值: 元素是在需要时才计算的，而不是预先计算好存储在内存中，这在处理包含复杂计算的序列时非常有用。wrapper 函数是装饰器函数内部定义的函数，它调用被装饰的函数，并将结果转换为大写。
pymysql 使用数据库连接池
03-07
在使用 pymysql 连接数据库连接池时，需要使用另一个库来管理连接池，比如 DBUtils。你可以使用 `pip install DBUtils` 来安装这个库。 2. 导入所需的模块。在你的代码中，你需要导入 pymysql、DBUtils 和 DBUtils....
评论 6
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值