python apply_async死锁_使用Pool（）在大型计算期间处理多处理死锁。apply\u asyn

我在python3.7.3中遇到了一个问题，在处理大型计算任务时，我的多处理操作(使用Queue、Pool和apply_async)死锁。在

对于较小的计算，这个多处理任务可以正常工作。但是，当处理较大的进程时，多处理任务会停止，或者死锁，完全没有退出进程！我读到，如果您“无限增长队列，并且您正在加入一个子进程，该子进程正在等待队列中的空间[…]您的主进程在等待该进程完成时暂停，并且它永远不会停止。”(Process.join() and queue don't work with large numbers)

我很难将这个概念转换成代码。我将非常感谢关于重构我写在下面的代码的指导：import multiprocessing as mp

def listener(q, d): # task to queue information into a manager dictionary

while True:

item_to_write = q.get()

if item_to_write == 'kill':

break

foo = d['region']

foo.add(item_to_write)

d['region'] = foo # add items and set to manager dictionary

def main():

manager = mp.Manager()

q = manager.Queue()

d = manager.dict()

d['region'] = set()