Python中的多进程几个小问题总结

Python中的多进程几个小问题总结

问题初始

初始是想用Python进行一个多进程的处理，所需并行的函数中可能存在异常，需进行捕获，当出现异常时需要终止程序，停止所有的子进程。
例如：

def func():
	try:
		some_function()
	except:
		sys.exit(1)

首先，我采用的是Python的multiprocessing包，用的是Pool进行简单处理

with multiprocessing.Pool(num_workers) as pool:
	pool.map(func, arg_list)

当然，这里如果想传多个参数可以选择用zip函数。此时，如果没有异常，程序将正常运行，返回想要的结果。但产生异常时，如果没有设置timeout参数的话将会被永久挂起，并不会如我所想的那样在检测出异常时停止运行。
当然这里如果我们手动分配process的话会处理这个问题，不过在此我需要进行处理的List很长，所以还是选用了Pool的方式。并且在我这里的需求时需要将程序挂起运行，也就是用nohup，如此的话将永远被挂在后台，如果停止需要Kill每个进程，并且你并不会知道哪里让其产生了异常。
首先，我进行了查询，问题一：由于子进程的异常不会导致parant停止分配工作，不会影响其他子进程。

sys.exit()和os.exit()的区别

是sys.exit()是仅仅抛出一个异常，因此和其他的异