进程池Pool的两种添加任务的方式:异步和同步
异步添加:就是随机的让进程池中空闲的进程去执行任务函数,注意所有任务是一次性添加进入进程池,
只是进程池中的进程随机分配完成所有的任务。
#Pool.apply_async(要调用的目标,(传递给目标的参数元祖,))
#每次循环将会用空闲出来的子进程随机去调用目标 #pool.close() #pool.join() 必须要关闭进程池,并等待
同步添加:是指一个一个任务添加到进程池,再进行执行,前面的任务没执行完,后面的任务无法添加到进程池中,
所以是有顺序的执行。
#Pool.apply(要调用的目标,(传递给目标的参数元祖,))
#每次循环将会用空闲出来的子进程随机去调用目标
#pool.close() #pool.join() 必须要关闭进程池,并等待
from multiprocessing import Pool
import os,time,random
def task(msg):
print msg
po = Pool(4)
for i in range(0,10):
#异步方式执行
po.apply_async(task,(i,))
#同步方式执行
po.apply(task,(i,))
po.close()
po.join()
multiprocessing.Pool常用函数解析:
-
apply_async(func[, args[, kwds]]) :使用非阻塞方式调用func(并行执行,堵塞方式必须等待上一个进程退出才能执行下一个进程),args为传递给func的参数列表,kwds为传递给func的关键字参数列表;
-
apply(func[, args[, kwds]]):使用阻塞方式调用func
-
close():关闭Pool,使其不再接受新的任务;
-
terminate():不管任务是否完成,立即终止;
-
join():主进程阻塞,等待子进程的退出, 必须在close或terminate之后使用;