python 异步调用

最新推荐文章于 2024-07-26 16:11:12 发布

微知girl

最新推荐文章于 2024-07-26 16:11:12 发布

阅读量1.9k

点赞数

分类专栏： # 编程文章标签： python

本文链接：https://blog.csdn.net/katrina1rani/article/details/109727036

版权

在处理大规模NLP数据，特别是涉及深度学习的情况下，同步代码可能会导致长时间运行。为了解决这个问题，可以利用Python的异步功能来提高效率。通过异步调用，前端不再需要等待，从而改善用户体验。参考链接提供了更多关于Python异步编程的详细教程。

摘要由CSDN通过智能技术生成

最近遇到个问题， NLP相关的代码，尤其是DL相关的代码，处理千万级数据显得会慢一些，有可能要好几个小时，那前端的等待是不可行的，这个时候就需要采用python的异步函数了。

同步代码

import time

def hello():
    time.sleep(1)

def run():
    for i in range(5):
        hello()
        print('Hello World:%s' % time.time())  
if __name__ == '__main__':
    run()

Hello World:1536842494.2786784
Hello World:1536842495.2796268
Hello World:1536842496.2802596
Hello World:1536842497.2804587
Hello World:1536842498.2812462

异步代码

import time
import asyncio

# 定义异步函数
async def hello():
    print('Hello World:%s' % time.time())
    #必须使用await，不能使用yield from；如果是使用yield from ，需要采用@asyncio.coroutine相对应
    await asyncio.sleep(1)   
    print('Hello wow World:%s' % time.time())

def run():
    tasks = []
    for i in range(5):
        tasks.append(hello())
    loop.run_until_complete(asyncio.wait(tasks))

loop = asyncio