Python之多进程、多线程、协程和分布式进程

1.多进程

    （1）使用os模块中的fork方法，仅适用于Unix/Linux系统

            Python的os模块自封装了常见的系统调用方法，其中就有fork方法。普通方法调用一次，返回一次；而fork方法调用一次，返回两次。原因在于系统调用时，系统会将当前进程（父进程）复制出一个几乎完全一样的进程（子进程），子进程永远返回0，父进程返回的是子进程的id。

    （2）使用multiprocessing模块，跨平台

            multiprocessing提供一个Process类描述进程对象，执行时传入执行参数和函数参数即可实现。用start方法启动进程，用join方法实现进程间的同步。

            当子进程数量巨大时，可以用其提供的Pool类来管理进程池，默认大小是CPU的核数。

    （3）进程间的通信

            Pipe通常用在两个进程间的通信，Queue用来多个进程间的通信。

2.多线程

    （1）提供了两个模块实现：thread低级模块和threading高级模块。

    （2）为保证数据的正确性（多个线程同时对数据修改，可能出现不可预料的结果），实现多个线程的同步。使用Thread对象的Lock和RLock实现。

    （3）CPU密集型操作用多进程，IO密集型操作用多线程

3.协程

    协程又称微线程，其拥有自己的寄存器上下文和栈，能保留上一次调用的状态。对于CPU来说，协程就是单线程，不用CPU考虑调度、切换上下文，省去CPU的切换开销，一定程度上来说，协程好于线程。

4.分布式进程

    分布式进程指将Process进程分布到多个机器上，完成复杂的任务。

    分布式进程需要调用multiprocessing模块，其不但支持多进程，其中的managers子模块还支持把多进程分布到堕胎机器上。