同步和异步请求概述
在讲celery之前,先说一下同步请求和异步请求
同步请求:所有逻辑处理、数据计算任务在view中处理完毕返回response,在views处理任务时,用户处于等待状态,直到页面返回结果。
异步请求:view中现将结果返回response,再在后台处理任务。用户无需等待,可以继续浏览网站。当任务处理完成时,我们可以再告知用户
为什么会需要消息队列(MQ)?
原因:由于高并发环境下,由于来不及同步处理请求,请求往往会发生阻塞,比如大量的insert,update之类的请求同时到达数据库,直接导致无数的行锁表锁,甚至最后请求堆积过多,从而触发too many connections错误。使用消息队列,可以一步处理请求,从而减轻系统的压力
队列概述
消息队列:是分布式系统中重要的组件
当不需要立即获取结果,但是并发量又需要进行控制的时候,差不多就需要使用消息队列的时候
消息队列主要解决了应用耦合,异步处理,流量削峰等问题:
当前使用的消息队列有:RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、MetaMq等,而部分数据库如Redis、Mysql以及phxsql也可实现消息队列的功能。
celery
概述:当视图函数执行某些耗时操作的时候,用户界面则为一直请求(加载)用户体验不好,使用celery进行异步加载
步骤
1.任务:task
2.队列:queue