Python多任务(6.Python中进程池Pool)

进程池Pool

 (1).当创建的任务不多时，可以利用multiprocessing中的Process动态生产多个进程，

   但如果有上百或上千目标，手动的去创建进程的工作量巨大，此时就可以用到multiprocess模块提供的Pool方法。

(2). 在进程池中，可以指定一个最大进程数，如果有新的请求提交到进程池中，如果池还没有满，那么就会创建一个新的进程

  用来执行该请求，但如果池中的进程数已经达到指定的最大值，那么该请求就会等待，直到池中有进程结束，才会

  用之前的进程来执行新的任务。

(3). 任务数不确定情况下，利用进程池

1.进程池的创建

   from multiprocessing import Pool    # 导入

   po = Pool(3)           # 定义一个进程池，最大的进程池为3

   po.apply_async(要调用的目标,(传递给目标的参数元组,))

    po.close()                     # 关闭进程池，关闭后po不再接受新的请求

    po.join()                         # 等待po中所有子进程执行完成。

from multiprocessing import Pool
import os,time,random

def worker(msg):
    t_start = time.time()
    print("%s开始执行，进程号为%d"%(msg,os.getpid()))
    time.sleep(random.random()*2) # random.random()随机成0-1的浮点数
    t_stop = time.time()
    print(msg,"执行完毕，耗时%0.2f"%(t_stop-t_start))

if __name__ == '__main__':
    po = Pool(3)  # 最大的进程数为3
    for i in range(0,10):
        '''每次循环将会用空闲出来的子进程去调用目标'''
        po.apply_async(worker,(i,))

    print("----start----")
    po.close()    # 关闭进程池，关闭后po不再接受新的请求
    po.join()     # 等待po中的所有子进程执行完成，必须放在close语句之后
    '''如果没有添加join()，会导致有的代码没有运行就已经结束了'''
    print("-----end-----")

执行结果：   发现一共执行的就只有3个进程，代码要执行时，先看进程池里面满了没有，如果满了，

就  等待  进程池里面进程执行完之后，在去用这个进程去执行

----start----
0开始执行，进程号为4804
1开始执行，进程号为29068
2开始执行，进程号为24580
0 执行完毕，耗时0.04
3开始执行，进程号为4804
3 执行完毕，耗时0.47
4开始执行，进程号为4804
4 执行完毕，耗时0.57
5开始执行，进程号为4804
1 执行完毕，耗时1.76
6开始执行，进程号为29068
2 执行完毕，耗时1.97
7开始执行，进程号为24580
5 执行完毕，耗时1.06
8开始执行，进程号为4804
6 执行完毕，耗时0.57
9开始执行，进程号为29068
8 执行完毕，耗时0.80
7 执行完毕，耗时1.75
9 执行完毕，耗时1.95
-----end-----