python入门教程之二十一协程异步爬虫

最新推荐文章于 2024-03-31 23:26:58 发布

123梦野

最新推荐文章于 2024-03-31 23:26:58 发布

阅读量290

点赞数

分类专栏： python 文章标签： python

本文链接：https://blog.csdn.net/qq_42832272/article/details/95167236

版权

python 专栏收录该内容

37 篇文章 0 订阅

订阅专栏

from urllib import request
import gevent
from gevent import monkey

monkey.patch_all()#把当前程序的所有的io操作给我单独的做上标记
def f(url):
	print('GET: %s' %url)
	resp = request.urlopen(url)
	data = resp.read()
	print('%d bytes received from %s.'%(len(data),url))
gevent.joinall([
	gevent.spawn(f,'https://www.python.org/'),
	gevent.spawn(f,'https://www.yahoo.com/'),
	gevent.spawn(f,'https://github.com/'),
	])