python multiprocess.pool中进程共享dict

文章讲述了在Python中使用多进程时,由于数据共享导致的字典内容不一致问题。解决方案是利用`multiprocess.Manager().dict()`创建可共享的字典,并用`Manager().lock()`进行同步,确保写操作的安全性。示例代码展示了如何在`subprocess`函数中正确地使用这些工具。
摘要由CSDN通过智能技术生成

形如

dict={}
def subprocess(dict):
	write_to(dict)
with Pool(2) as p:
	p.map(subprocess,dict for i in some_times)

方式传dict,检查传入的id(dict)与定义的dict不相同。

解决方法:使用multiprocess.Manager().dict()。同时注意要使用multiprocess.Manager().lock()

from multiprocess import Manager
dict=Manager().dict()
def subprocess(args):
	dict,lock = args
	lock.acquire()
	try:
		write_to(dict)
	finally:
		lock.release()
with Pool(2) as p:
	lock = Manager().lock()
	p.map(subprocess,((dict,lock) for i in some_times))
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值