'''
<进程池的概念>
初始化Pool时,可以指定一个最大进程数。在有新的请求提交到Pool中时,如果
池子还没有满,那么就会创建一个新的进程用来执行请求;如果池中的进程数
已经达到最大值,那么该请求就会等待,直到池中有进程结束,才会创建新的进程
'''
#下面是一个进程池的例子,写一个伪文件下载器-->使用多进程(进程池)的思想
#引入多线程模块
from multiprocessing import Pool
import os,time
#downloader(伪文件下载def)
def downloader(file_name):
#假装开始下载
print('%s downloading.....'%file_name)
#使def睡眠5秒
time.sleep(5)
#假装下载成功
print('%s finished!!!'%file_name)
#主程序(仅当前脚本执行有效)
if __name__ == '__main__':
#接收设置下载文件的总个数
file_num = int(input('plz set total download files num here : '))
# file_num = 100
#接收设置进程池中存在进程的最大极值
max_process = int(input('plz set max pool num here : '))
# max_process = 5
#实例化一个进程池对象
pool = Pool(max_process)
#循环下载文件
for v in range(1,file_num+1):
#设置文件名称
file_name = '%d.jpg'%v
#使用Pool对象的apply_async()方法循环向进程池中添加进程,func->进程执行的def,args->参数元组(单个参数元组时请加,)
pool.apply_async(func=downloader,args=(file_name,))
#关闭进程池对象(关闭后pool不再接收新的请求)
pool.close()
#阻塞一会进程等待其执行完毕(注意:这个一语句一定要放在close后面)
pool.join()
#假装所有下载都完成了
print('upload done!')
python3中的进程池(附带实例,一个fake文件下载)
最新推荐文章于 2024-07-17 20:47:38 发布