Python爬取视频是利用多线程快还是利用协程快?
最近在学习python爬虫相关技术,简单了解了多线程和协程的概念,跟着网上大佬们学写了几个小爬虫玩儿,基本弄懂了如何爬取文字,图片和简单的视频,突然就想测试一下,爬取视频到底是多线程较快还是利用协程较快。于是做了一个简单的测试:爬取一页糗事百科的视频,大概有25个视频,分别用单线程、多线程和协程,探一下高低。下面贴出代码,核心部分都差不多,因为是初学者,代码有些稚嫩,请大佬们勿喷。单线程: import requests from lxml import etree import time
原创
2021-07-14 19:02:28 ·
435 阅读 ·
5 评论