Requests_线程池的基本使用

最新推荐文章于 2024-06-26 12:16:39 发布

火浴R

最新推荐文章于 2024-06-26 12:16:39 发布

阅读量353

点赞数

分类专栏： Python 文章标签： python 线程池

本文链接：https://blog.csdn.net/qq_39799322/article/details/115742606

版权

Python 专栏收录该内容

40 篇文章 1 订阅

订阅专栏

该博客介绍了如何使用Python的`multiprocessing.dummy.Pool`模块实现线程池，以并行方式加快下载速度。通过创建线程池对象并调用`map`方法，将任务分发到各个线程中，显著减少了下载列表中多个元素的时间，展示了多线程在提升效率上的优势。

摘要由CSDN通过智能技术生成

Requests_线程池的基本使用

#!user/bin/env python3
# -*- coding:utf-8 -*-
# Email 23198899766@QQ.com
# Time : 2021/3/12 23:29

# import time
# #单线程串行方式执行
# def get_page(str):
#     print("正在下载 :",str)
#     time.sleep(2)
#     print("下载成功",str)
# name_list = ['xiaozi','aa','bb','cc']
# start_time = time.time()
# for i in range(len(name_list)):
#     get_page(name_list[i])
# end_time = time.time()
# print('%d second'%(end_time-start_time))



import time
#导入线程池模块对应的类
from multiprocessing.dummy import Pool
#线程池方式执行
start_time = time.time()
def get_page(str):
    print("正在下载 :",str)
    time.sleep(2)
    print("下载成功",str)
name_list = ['xiaozi','aa','bb','cc']

#实例化一个线程池对象
pool = Pool(4)

#将列表中每一个列表元素传递给get_page进行处理。
pool.map(get_page,name_list)

end_time = time.time()
print(end_time-start_time)