Tornado框架的学习--5.Tornado异步化

本文介绍了Tornado异步化的实现,通过装饰器实现请求方法的异步化,并通过实例练习了异步百度搜索。此外,详细探讨了ab工具进行网站性能压力测试,包括原理、安装、参数说明和性能指标,最后提到了HTML5 WebSocket与Tornado结合实现聊天室应用。
摘要由CSDN通过智能技术生成

一. 预备知识

并发编程

同步 :先执行前面的,然后再执行后面的代码,按顺序依次执行。
异步 :后面的代码不需要等待前面代码执行完成后才执行。处理比较耗时的操作,可以使用异步:网络请求,数据库操作,文件操作。

并行:线程数量 <= CPU数量
并发:线程数量 > CPU数量

所谓并发编程就是让程序中有多个部分能够并发或同时执行,并发编程带来的好处不言而喻,其中最为关键的两点是提升了执行效率和改善了用户体验。下面简单阐述一下Python中实现并发编程的3种方式:

1.多线程:Python中通过`threading`模块的`Thread`类来支持多线程编程。Python解释器通过GIL(全局解释器锁)来防止多个线程同时执行本地字节码,这个锁对于CPython(Python解释器的官方实现)是必须的,因为CPython的内存管理并不是线程安全的。因为GIL的存在,Python的多线程并不能利用CPU的多核特性。
协程:线程中的,一个进程可以有多个线程, 一个线程可以有多个协程。不能使用多核。

2.多进程:使用多进程可以有效的解决GIL的问题,Python中的`multiprocessing`模块提供了`Process`类来实现多进程,由于进程间的内存是相互隔离的(操作系统对进程的保护),进程间通信(共享数据)必须使用管道、套接字等方式,这一点从编程的角度来讲是比较麻烦的,为此,Python的`multiprocessing`模块提供了一个名为`Queue`的类,它基于管道和锁机制提供了多个进程共享的队列。 

3.异步编程(异步I/O):所谓异步编程是通过调度程序从任务队列中挑选任务,调度程序以交叉的形式执行这些任务,我们并不能保证任务将以某种顺序去执行,因为执行顺序取决于队列中的一项任务是否愿意将CPU处理时间让位给另一项任务。异步编程通常通过多任务协作处理的方式来实现,由于执行时间和顺序的不确定,因此需要通过callback(回调函数v6.0之后已取消)或者`Future`对象来获取任务执行的结果。目前我们使用的Python 3通过`asyncio`模块以及`await`和`async`关键字(Python 3.5中引入,Python 3.7中正式成为关键字)提供了对异步I/O的支持。

asyncio协程

 import asyncio
    
    async def fetch(host):
        """从指定的站点抓取信息(协程函数)"""
        print(f'Start fetching {host}\n')
        # 跟服务器建立连接
        reader, writer = await asyncio.open_connection(host, 80)
        # 构造请求行和请求头
        writer.write(b'GET / HTTP/1.1\r\n')
        writer.write(f'Host: {host}\r\n'.encode())
        writer.write(b'\r\n')
        # 清空缓存区(发送请求)
        await writer.drain()
        # 接收服务器的响应(读取响应行和响应头)
        line = await reader.readline()
        while line != b'\r\n':
            print(line.decode().rstrip())
            line = await reader.readline()
        print('\n')
        writer.close()
    
    def main():
        """主函数"""
        urls = ('www.sohu.com', 'www.douban.com', 'www.163.com')
        # 获取系统默认的事件循环
        loop = asyncio.get_event_loop()
        # 用生成式语法构造一个包含多个协程对象的列表
        tasks = [fetch(url) for url in urls]
        # 通过asyncio模块的wait函数将协程列表包装成Task(Future子类)并等待其执行完成
        # 通过事件循环的run_until_complete方法运行任务直到Future完成并返回它的结果
        loop.run_until_complete(asyncio.wait(tasks))
        loop.close()
        
    if __name__ 
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值