15进程池的原理以及使用

用于需要创建的进程比较多的时候

开启过多的进程并不能提高你的效率，反而会降低你的效率，假设有500个任务，同时开启500个进程，这500个进程除了不能一起执行之外（cpu没有那么多核），操作系统调度这500个进程，让他们平均在4个或8个cpu上执行，这会占用很大的空间。进程池里的每个进程可以执行完任务后会开始执行剩余的任务。

from multiprocessing import Pool
import time
import os
import random


def worker(i):
    t_start = time.time()
    print("%s开始执行，进程号为%d" % (i, os.getpid()))
    # random.random()随机生成0-1之间的浮点数
    time.sleep(random.random()*2)
    t_stop = time.time()
    print(i, "执行完毕，耗时%0.2f" % (t_stop-t_start))


def main():
    po = Pool(3)   # 定义一个最大进程为3的进程池
    print("-----start-----1")
    for i in range(0, 10):
        # Pool().apply_async(要调用的目标,(传递给目标的参数元组,))
        # 每次循环会用空出来的子进程去调用目标
        po.apply_async(worker, (i,))
    print("-----start-----")
    po.close()  # 关闭进程池，用户不能再向这个池中提交任务了，关闭后po不再接收新的请求
    po.join()  # 必须放在close之后，阻塞直到进程池中所有的任务都被执行完
    print("-----end-----")


if __name__ == "__main__":
    main()