继续写关于Python
multiprocessing的使用手记,继上次的进程模型之后,这次展开讨论一下multiprocessing当中的跨进程对象共享的问题。
在mp库当中,跨进程对象共享有三种方式,第一种仅适用于原生机器类型,即python.ctypes当中的类型,这种在mp库的文档当中称为shared
memory
方式,即通过共享内存共享对象;另外一种称之为server process
,
即有一个服务器进程负责维护所有的对象,而其他进程连接到该进程,通过代理对象操作服务器进程当中的对象;最后一种在mp文档当中没有单独提出,但是在其
中多次提到,而且是mp库当中最重要的一种共享方式,称为inheritance
,即继承,对象在
父进程当中创建,然后在父进程是通过multiprocessing.Process创建子进程之后,子进程自动继承了父进程当中的对象,并且子进程对这
些对象的操作都是反映到了同一个对象。
这三者共享方式各有特色,在这里进行一些简单的比较。
首先是共享方式所应对的对象类型,看这个表:
共享方式
支持的类型
Shared memory
ctypes当中的类型,通过RawValue,RawArray等包装类提供
Inheritance
系统内核对象,以及基于这些对象实现的对象。包括Pipe, Queue,
JoinableQueue, 同步对象(Semaphore, Lock, R