celery与redis数据实现异步分布式搭建

本文介绍了如何利用celery框架结合redis构建分布式系统。内容包括celery的基本原理,所需组件如rabbitmq或redis,以及django-celery的安装配置。通过示例展示了在Django中创建celery app,编写任务文件,并启动celery worker进行异步任务处理。最后,说明了启动celery服务和redis数据库的步骤,以及如何在视图中触发celery任务。
摘要由CSDN通过智能技术生成

(一)celery框架简介

            Celery 是一个简单的,灵活的,可靠的python编写处理大量消息的分布式系统。

            分布式:就是将任务分发个多个客户端进行处理的模式。通常在python当中使用的分布式有两种:

           1、redis分布式,利用redis广告模式进行分布式

           2、使用celery进行分布式

           分布式开发,一定涉及一个设计模式:生产消费者模式

     Celery 基本原理:

在这里插入图片描述
  使用celery需要的组件
  1、pip install celery
  2、需要消息队列
    1、rabbitmq 消息队列
    2、Redis
    3、其他数据库
 在整个celery开发的过程当中知道要有存放任务的容器,这个容器可以是redis数据库,可以是其他数据库,还可以是rabbitmq消息队列。如果任务有结果还需要设置一个容器来存放结构。
原理:
在这里插入图片描述
在这里插入图片描述
使用django-celery+redis进行异步任务处理

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Django中的Celery是一个基于Python的分布式任务队列,它可以用来异步执行耗时的任务,例如发送邮件、生成PDF等等。Celery需要配合一种消息中间件来使用,而Redis是一种流行的消息中间件,可以与Celery配合使用。 在Django中使用CeleryRedis可以按照以下步骤进行: 1. 安装CeleryRedis ``` pip install celery redis ``` 2. 在Django项目中配置Celery 在Django项目的settings.py文件中添加如下配置: ``` # 配置Celery CELERY_BROKER_URL = 'redis://localhost:6379/0' # 指定redis作为消息中间件 CELERY_RESULT_BACKEND = 'redis://localhost:6379/0' # 指定redis作为结果存储 # 加载Celery配置 CELERY_TIMEZONE = 'Asia/Shanghai' CELERY_ACCEPT_CONTENT = ['application/json'] CELERY_TASK_SERIALIZER = 'json' CELERY_RESULT_SERIALIZER = 'json' ``` 3. 在Django项目中创建Celery任务 在Django项目的某个app中,可以创建一个tasks.py文件,定义Celery任务: ``` from celery import shared_task @shared_task def add(x, y): return x + y ``` 4. 启动Celery worker 在命令行中,进入Django项目的根目录,启动Celery worker: ``` celery -A project_name worker --loglevel=info ``` 其中,project_name是Django项目的名称。 5. 调用Celery任务 在Django项目中,可以通过如下方式调用Celery任务: ``` from .tasks import add result = add.delay(2, 3) ``` 上述代码会异步执行add任务,返回一个AsyncResult对象,可以通过该对象获取任务执行结果。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值