python并发之协程_Python基础教程——多协程并发——gevent

一看到多协程并发,我相信很多同学的第一个念头就是:头大。这玩意儿太难了,太复杂了,很难搞。然而,我要说的是:其实不然,它很容易使用,也很容易掌握。今天,我就来个复杂一点的需求,然后以很简单的方式解决这个问题,使用requests和gevent这两个神器和大家一起领略一下它的美妙。

8b82b9014a90f6037a588f9403462f1db251edd7.png?token=45676e94024bd45e0e3c39d3a8a64545gevent神器

提出需求

我有一个后端服务的接口,需要做一个有一定并发量的性能测试,每次请求的消耗时间要记录下来,并且最终我还需要求出所有耗时的平均值,进而对这个接口的性能进行一个综合评估,来决定它是否还需要优化。

看,这个需求是不是有点麻烦?事实上,使用Python做一个简单的测试,是很容易的。

d31b0ef41bd5ad6e5c4b2f3bba9fa5ddb7fd3c0f.png?token=36de3dfd89428ac6e2e0aa62a515c514性能测试

功能实现

神器在手,实现起来实在太简单。实现思路:

创建10个协程,每个协程发起网络请求的时候,把耗时时间记录下来,保存到一个list中,最后对list做一个求平均值的处理就好啦!

d53f8794a4c27d1ef332d4c620813168ddc43872.png?token=2fcce060afe353847ead61963c0ae5a7并发性能测试的功能实现

看,只有38行代码,是不是太简单了,而且还使用到了reduce这个高阶函数(我还发布了Python高阶函数的使用文章,欢迎关注哦~)

代码中有注释,很简单的,聪明的你肯定是一看就懂哦。

运行代码,得到如下结果:

d6ca7bcb0a46f21fb20a08d8cf70f7660d33aedd.png?token=83a01c886b82851d229033b5dca3c5fb多协程并发网络并发请求运行结果

这了验证我们的结果是靠谱的,我把这10个耗时复制到WPS表格中再算一遍:

9a504fc2d562853557791b17adbbeac0a6ef63c2.png?token=acef1559ce0de41a7602ab91bd3b3f81性能测试分析

怎么样?没问题吧!

引用库功能说明

requests库是一个十分优秀的Python网络库,尤其是它对session和cookies有着十分完善的支持,因此如果你的接口需要登录,那就更容易了,先请求一下,然后使用带有登录session的requests实例再去并发请求即可,也很容易的。

s = requests.session()s.get(url, headers=self.page_header, timeout=(self.connection_timeout, self.read_timeout))

是不是也很容易?

gevent是一个性能很高、又很易于使用的协程库,它是基于libev和libuv实现,libev和libuv是基于事件驱动的高性能、跨平台的I/O库,性能十分优秀。gevent这个库解决了Python原生自带的各种asyncio等等使用的繁琐问题。前面图上已经有体现,几行代码就能完成很多个协和的调度和运行。

总得来说,gevent是专门为解决Python原生的线程并发问题而产生的,它以微线程greenlet为核心,使用了操作系统层面的epoll事件模型,实现了资源开销低、并发性能高,又提供了十分易用的API,真的是我们的福音啊

总结

其实传说中的高并发、协程,并没有我们想像的那么难,一个性能测试,随手就生成一张图表,也是很容易的。只要大家找对了“兵器”,就很容易啦

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值