Python线程池搭建threadpool和进程池搭建multiprocessing和协程池搭建gevent使用教程：提高爬虫效率

为什么能够提升爬虫效率？
因为像requests请求这些需要时间处理的，通常一个请求需要一秒半秒，每请求一次等待它完成才能执行下面代码，大大浪费时间。那么可不可以先别发起请求，先把所有的链接、页码、表单这些参数按顺序存储在一个参数列表，等所有信息加载完了，再让线程们轮番地按顺序发起请求。当然是可以的，这就是线程池思想。在线程池中，没有一个线程是空闲的，所有线程都一个接一个地循环完成任务，直至程序运行停止，像是铁打的流水工。【惊喜】这样的方法获取数据的顺序并不会发生改变。

一、线程池搭建：单个传参

import threadpool

def single(num):
    print(num)
    
arguments_list