1.celery介绍
Celery 是一个专注于实时处理和任务调度的分布式任务队列,本身不是任务队列, 是管理分布式任务队列的工具.任务队列采用redis中的list或mq实现,有5个常用组件
Task
就是任务,有异步任务和定时任务
Beat
定时任务调度器,根据配置定时将任务发送给Broker。
Broker
中间人,接收生产者发来的消息即Task,将任务存入队列。任务的消费者是Worker。
Worker
执行任务的单元,它实时监控消息队列,如果有任务就获取任务并执行它。
Backend
用于存储任务的执行结果。
2.工作原理流程
celery用CELERYBEAT_SCHEDULE实现定时任务。消息失败可以通过self.retry(exc=e,countdown=3,max_retries=5)来设置重试次数和间隔时间。celery默认会开启4个线程来处理任务,参数-c可以开启更多任务线程。执行定时任务时, Celery会通过celerybeat进程来完成。Celerybeat会保持运行, 一旦到了某一定时任务需要执行时, Celerybeat便将其加入到queue中,适用于周期性任务。
3. 调用
###1. 在项目中创建一个tasks文件 tasks文件下面是一个个的异步任务
###2. 异步任务要在tasks的 init</