进程池
概述
(1)池子里面放的是进程,进程池会根据任务执行情况自动创建进程而且尽量少创建进程,合理利用进程池中的进程完成多任务
(2)当需要创建的子进程数量不多时,可以直接利用multiprocessing中的Process动态生成多个进程,但如果是上百甚至上千个目标,手动去创建进程的工作量巨大,此时就可以用到multiprocessing模块提供的Pool方法
(3)初始化Pool时,可以指定一个最大进程数,当有新的请求提交到Pool时,如果池还没有满,那么就会创建一个新的进程用来执行该请求;但如果池中的进程数已经达到指定的最大值,那么该请求就会等待,直到池中有进程结束,才会用之前的进程来执行新任务
Pool的使用
(1)实例化一个Pool对象:pool = multiprocessing.Pool(10) #10为进程池中进程最大个数
(2)Pool创建的实例对象常用方法
pool.apply(func[,args[,kwds]]):阻塞方式(同步)调用函数,args表示以元组方式给函数传参,kwargs表示字典传参
pool.apply_async(func[,args[,kwds]]:使用非阻塞(异步)调用函数
close():关闭pool,使