Celery 结构,组件

Celery 是一个Python的分布式任务队列,它专注于实时处理但也支持任务调度。核心架构包括消息中间件(如RabbitMQ、Redis)、任务执行单元(Worker)和任务结果存储。Celery作为生产者和消费者,Producer发送任务到队列,Worker负责消费并执行任务。适用场景包括异步任务和定时任务,其优点在于简单、高可用和快速。了解版本支持情况,如Python版本不兼容时,可参考官方建议进行修改。
摘要由CSDN通过智能技术生成

什么是 Celery?

Celery是一个简单、灵活且可靠的,处理大量消息的分布式系统

专注于实时处理的异步任务队列

同时也支持任务调度

celery 架构

Celery的架构由三部分组成,消息中间件(message broker),任务执行单元(worker)和任务执行结果存储(task result store)组成。
~~~~~~~~~~~~~~~~~

消息中间件

Celery本身不提供消息服务,但是可以方便的和第三方提供的消息中间件集成。包括,RabbitMQ, Redis等等

任务执行单元

Worker是Celery提供的任务执行的单元,worker并发的运行在分布式的系统节点中。

任务结果存储

Task result store用来存储Worker执行的任务的结果,Celery支持以不同方式存储任务的结果,包括AMQP, redis等

Celery 组件

Celery 扮演生产者和消费者的角色
  • Producer :
    任务生产者. 调用 Celery API , 函数或者装饰器, 而产生任务并交给任务队列处理的都是任务生产者。

  • Celery Beat :

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值