python协程池详解及多任务协程池下载器语法实现

协程池

在python中，当需要创建的⼦协程数量不多时，可以直接利⽤gevent模块中的spawn动态成⽣多个协程，但如果是上百甚⾄上千个⽬标，⼿动的去创建协程的⼯作量巨⼤，此时就可以⽤到gevent模块提供的pool.Pool⽅法。初始化Pool时，可以指定⼀个最⼤协程数，当有新的请求提交到Pool中时，如果池还没有满，那么就会创建⼀个新的协程⽤来执⾏该请求；但如果池中的协程数已经达到指定的最⼤值，那么该请求就会等待，直到池中有协程结束，才会⽤之前的协程来执⾏新的任务。

协程池下载器

多任务协程池图片下载器的实现：

import re
import gevent
from gevent import monkey,pool
import time,random
import urllib.request

monkey.patch_all()


jpg_num = 0
def down_load_img(img_uel,img_name):
    global ipg_num
    ipg_num += 1
    print("正在下载第{}张".format(jpg_num))
    
    img = urllib.request.urlopen(img_uel)  # 设置网络连接
    img_content = img.read()  # 读取网址信息
    # 设置一个新的文件并将信息写入
    with open(r"%s" % img_name,"wb") as f1:
        f1.write(img_content)
        time.sleep(random.random())
    
    
    
def main():
    p &