系列索引:菜菜的并发编程笔记 | Python并发编程详解(持续更新~)
一、补充一点subprocess的知识
二、subprocess的实例
三、Asyncio和Gevent的对比
四、Gevent编程实例
Gevent提供猴子补丁MonkeyPatch方法,通过该方法gevent能够 修改标准库里面大部分的阻塞式系统调用,包括socket、ssl、threading和 select等模块,而变为协作式运行。
以下是一个爬虫的修改版,只需要monkey.patch_all()
,就能自动修改阻塞为非阻塞
使用gevent.spawn()
创建任务列表,然后gevent.joinall(tasks)
执行。
import gevent.monkey
gevent.monkey.patch_all()
import gevent
import blog_spider
import time
begin = time.time()
for url in blog_spider.urls:
blog_spider.craw(url)
end = time.time()
print("single thread, cost = ", end - begin)
begin = time.time()
tasks = [gevent.spawn(blog_spider.craw, url) for url in blog_spider.urls]
gevent.joinall(tasks)
end = time.time()
print("gevent, cost = ", end - begin)
五、使用Gevent改造异步服务器
from gevent import monkey
monkey.patch_all()
from flask import Flask
from gevent import pywsgi
app = Flask(__name__)
@app.route("/")
def index():
return "success"
if __name__ == "__main__":
# app.run()
server = pywsgi.WSGIServer(
("0.0.0.0", 8888), app)
server.serve_forever()
完结撒花🎉🎊✨
Python进阶之并发编程篇持续更新,欢迎
点赞收藏
+关注
上一篇:菜菜的并发编程笔记 |(九)异步IO实现并发爬虫加速
下一篇:菜菜的刷题日记 | 被LeetCode用Python狂虐的那段日子
本人水平有限,文章中不足之处欢迎下方👇评论区批评指正~如果感觉对你有帮助,点个赞👍 支持一下吧 ~
不定期分享 有趣、有料、有营养内容,欢迎 订阅关注 🤝 我的博客 ,期待在这与你相遇 ~