python在使用pool时候Can't pickle type 'NoneType'

在python中使用multiprocessing中pool的时候 报错:

Traceback (most recent call last):
  File "street_order_data_detail_into_db.1.py", line 500, in <module>
    get_result = [res.get() for res in multiple_results]
  File "/usr/local/app/anaconda2/lib/python2.7/multiprocessing/pool.py", line 572, in get
    raise self._value
cPickle.PicklingError: Can't pickle <type 'NoneType'>: attribute lookup __builtin__.NoneType failed
def task(db):
    #do something

if __name__ == "__main__":
    db = MySQLdb.connect()
    pool = Pool(4)
    multiple_results = [pool.apply_async(task,(i,db)) for i in range(10)]
    get_result = [res.get() for res in multiple_results]

这时候会报错:
解决方法,将数据库连接操作等 放到任务进程中执行,不要在主进程中传参给任务进程

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值