最近项目在提高业务的效率时,在网上查了很多提高运行效率的方法,主要是多进程multiprocessing和threading,经过试验最终采取了多线程的方法。在编写多进程时遇到了一个问题:创建进程multiprocessing.Process必须在程序的主函数if name == ‘main’:中才能运行,查了好久才明白其中的道理。大家可以看看这篇大神博客,很简单的讲清楚了。
错误写法:
import os
from multiprocessing import Process
def child_process(name):
print('i am child process %s(%s)' %(name,os.getpid()))
p = Process(target=child_process,args=('test',))
p.start()
p.join()
正确写法:
import os
from multiprocessing import Process
def child_process(name):
print('i am child process %s(%s)' %(name,os.getpid()))
if __name__ =='__main__':
p = Process(target=child_process,args=('test',))
p.start()
p.join()
原因 :
这是 Windows 上多进程的实现问题。在 Windows 上,子进程会自动 import 启动它的这个文件,而在 import 的时候是会执行这些语句的。如果你这么写的话就会无限递归创建子进程报错。但是在multiprocessing.Process的源码中是对子进程再次产生子进程是做了限制的,是不允许的,于是出现如上的错误提示。所以必须把创建子进程的部分用那个 if 判断保护起来,import 的时候 name 不是 main ,就不会递归运行了。所以在创建多进程时,是不能调用模块或方法来创建的。