Sanic、uvloop及Asyncio的局限

最新推荐文章于 2024-09-16 07:50:02 发布

jaylixueji_csdn

最新推荐文章于 2024-09-16 07:50:02 发布

阅读量914

点赞数

分类专栏：高并发 Python Sanic 文章标签： python 架构网络

本文链接：https://blog.csdn.net/weixin_42359693/article/details/131460845

版权

16 篇文章 1 订阅

订阅专栏

2 篇文章 0 订阅

订阅专栏

1 篇文章 0 订阅

订阅专栏

Sanic

uvloop是Python原生事件循环的替代品，能提高了性能。
为什么提高了性能？：
1. uvloop是基于Cython写的，执行效率更高。
2. uvloop底层基于libuv，而libuv是高性能、跨平台的异步IO库，nodejs的事件循环也是基于libuv的。【libev介绍详见：网络io模型、同步异步及libuv】
缺点：uvloop不支持Windows。
即便不开发 Sanic 服务，也可以使用 uvloop 来替换 asyncio 内部的事件循环。

import asyncio
import uvloop
asyncio.set_event_loop_policy(uvloop.EventLoopPolicy())

这是用简单的echo服务做的测试，不能代表所有生产环境的情况。

【解释】：官方人员本来想用aiohttp这个Python中最常用的异步http服务库测试的。但是它的http解析器效率太低了，已然成为整个系统的瓶颈，所以他们手动实现了http-parser（起初是为Nginx设计的，所以效率非常高）的Python版本，称之为httptools。
uvloop对aiohttp并没有性能提升！

Python基于协程的异步是为了弥补GIL对多线程并发的限制。
如果追求性能，建议使用原生支持高并发和协程的语言，如：Golang、node.js等，代价就是切换技术栈，开发成本的增加。

目前主要是很多库还是同步的。
只要有一处同步就会阻塞整个线程及其中的所有协程。

直到Python3.11仍然是同步的，如果业务代码中必然大量输出日志，日志会成为整个框架或脚本的性能瓶颈。
可选的异步库：
- aiologger：star非常少，可靠性未知。
- 注意：aiologger仅当登录到 stdout/stderr 时才完全异步。如果您登录磁盘上的文件，则您并不是完全异步的，而是将使用线程。

直到Python3.11仍然是同步的，
可选备用库：
- aiofiles：star较多可靠。
  - 底层是基于线程池：aiofiles helps with this by introducing asynchronous versions of files that support delegating operations to a separate thread pool.