Django定时器Celery+Redis（一）Celery安装使用

最新推荐文章于 2024-04-25 15:30:50 发布
最新推荐文章于 2024-04-25 15:30:50 发布
阅读量1.7k 收藏 6
点赞数 1
分类专栏： Django 文章标签： Celery Redis Django 定时器 安装初步使用
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/youand_me/article/details/82015552
版权
前言

       开发Django也有一段时间了，在最近的项目遇到了需要使用定时器的需求：在每天的00:00需要对每个用户的当天消费数据进行统计。这时候就需要用到定时任务，加上使用的Django开发，所以选择了Celery。
       Celery是一个基于python开发的分布式任务队列框架，可以使用任务队列的方式在分布式的机器上执行任务调度。译名为：芹菜，不知道和分布式任务队列MQ有何关联。其主要包含：

  • Broker：发送和接收MQ队列任务消息的方案，常用是RabbitMQ和Redis，还有Amazon SQS、Zookeeper
  • Workers：处理任务的苦力，每个worker就相当于一个进程，可以有很多个worker
  • Beat：任务安排，制定任务，定时管理，可以理解为管理worker工作的
  • Backend：存储处理结果的后端
环境

       本小节先记录Celery的初步使用，其中我的环境为：

  • system：Ubuntu 16.04
  • python：Python 3.5.2
  • celery：4.2.0
  • redis：2.10.6
安装

       由于我是基于Python3开发，所以安装都使用pip3，我将Redis作为Broker服务

最低0.47元/天 解锁文章
丶点小非
关注
  • 1
    点赞
  • 踩
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
celery-redis的安装和使用
Starrain00的专栏
07-13 8984
python的代码，想使用中间件来传递数据，开始想用qpid，但qpid在python上的性能不咋地，吞吐量才2000条/秒（C的可以达到几万条/秒）。所以打想用celery试试，完全0起点，记录一下安装和使用的过程，做个备忘。 先到celery的官网学习安装：http://celery.github.com/celery/getting-started/first-steps-with-cel
Celery+redis实现异步
dianjialong8220的博客
07-01 185
目录 Celery+redis实现异步 安装redis 安装celery-with-redis 添加celery相关配置 创建异步运行任务tasks.py 启动 Celery+redis实现异步 安装redi...
Django 3.0.1 + celery 4.4.2 + redis 部署
01-20
一、背景 （1）Celery 4.0要求Django1.8或者比1.8 更新的版本，如果Django低于1.8版本，请使用Celery 3.1版本。 （2）俺是个小气的人，免费听哔哩上几年前的Django教程视频。让安装三个包：celery、celery-with-redis、django-celery。依次安装，发现celery-with-redis、django-celery支持的celery版本最高到4.0。也就是最新版本的Celery已经实现了 celery-with-redis、django-celery包的功能，不在需要安装这两个包。 ERROR: django-celery 3
Django中celery的使用
最新发布
瑞瑞的博客
04-25 445
django中celery的使用，异步任务，定时任务，以及任务的结果查看
Django+redis+celery 实现异步任务
Leo062701的博客
05-26 1634
在后台中，可能会有一些耗时的任务，会影响到前端响应速度。为加快响应，可使用异步任务的方式在后台执行耗时的操作。 一、Django中的异步请求 Django Web中从一个http请求发起，到获得响应返回html页面的流程大致如下：http请求发起 -- http handling（request解析） -- url mapping（url正则匹配找到对应的View） -- 在V...
Celery+django+redis异步执行任务
皓阳当空-博客
01-08 8510
Celery+django+redis异步执行任务本文用到的各工具版本： celery 4.0.2 django 1.10.3 redis 3.2.6 特别注意： 如果你的项目是django框架，那么django-celery,celery-with-redis等等这些东西，都不要用了（这些东西会受python、celery版本的影响，我一直没测通…）。直接pip安装celery 4版本以上
django+celery+redis+supervisor教程代码
03-07
教程网址：http://blog.csdn.net/win_turn/article/details/60658525
本项目是本人学习django+celery+redis+docker实战的项目.zip
02-02
本项目是本人学习django+celery+redis+docker实战的项目。
docker-compose-django-postgresql-redis-example：Django + Postgres + Redis + Celery + Celery Beat + WebSocket服务器
02-05
使用Docker Compose开发Django 包括： Python + Node.js Django的 WebSocket服务器 芹菜工作者+芹菜节拍 PostgreSQL 雷迪斯 要求： Docker> = v1.10.3 Docker Compose> = v1.7.1 Python> = 3.5 OS X Docker本...
Django使用Celery加redis执行异步任务的实例内容
09-08
以下将详细介绍如何在Django中配置和使用Celery与Redis来执行异步任务。 首先，Celery是一个分布式任务队列，它专注于实时操作，但也支持调度。它允许我们将任务分发到多个工作进程，以便在后台异步执行，而不会...
python3.7.0+Django2.0.4使用django-celery遇到的那些坑
冰月i
03-20 2794
首先大家知道Django是一个同步框架。 为了加快用户的响应时间，提高用户体验。所以决定采用异步任务的方式在后台执行一些任务 而且celery除了异步任务，还可以开启定时任务，方便调度 需要安装的软件包 最好按顺序安装 　　pip install celery 　　pip install celery-with-redis 　　pip install django-celery 因为asyn...
celery+django+redis
weixin_44980838的博客
01-03 545
Celery介绍 1、celery应用举例 1、Celery 是一个 基于python开发的分布式异步消息任务队列，通过它可以轻松的实现任务的异步处理， 　如果你的业务场景中需要用到异步任务，就可以考虑使用celery 2、你想对100台机器执行一条批量命令，可能会花很长时间 ，但你不想让你的程序等着结果返回，而是给你返回 一个任务ID, 　　　　　　　　你过一段时间只需要拿着这个任务id就可以拿...
django中异步化celery的使用
weixin_44634704的博客
08-11 1791
~网站优化第一定律：缓存 (空间换时间) -热数据(热点数据):体量不大、访问频率极高、更新不频繁 ~网站优化第二定律：削峰 (能不马上做的事情都不要马上做)、消息队列 -遇到耗时间的任务(用户请求)，用户不需要马上得到结果、异步化、推迟执行 -多线程 -异步消息队列 -celery #在django中使用celery模块提供消息队列服务 import os import celery from django.conf import settings os.environ.setdefault('DJAN
Celery + Redis交互过程探究
bocai_xiaodaidai的博客
03-24 3533
过程不贴上来了，直接看结论： 1、当发起一个 task 时，会向 redis 中插入以"celery"为key一条列表类型的记录,。 2、如果这时有正在待命的空闲 worker，这个 task 会立即被 worker 领取。 3、如果这时没有空闲的 worker，这个 task 的记录会保留在"celery" key 中。 4、如果task被worker领取，这时会将这个 task 的记录从 k...
Celery消息队列----配置定时任务
zhangfh1990的博客
08-14 8298
Introduction celery beat is a scheduler; It kicks off tasks at regular intervals, that are then executed by available worker nodes in the cluster.By default the entries are taken from the beat_schedul
Celery + Redis
qwer000999888的博客
03-23 1340
文本尝试研究，使用 redis 作为 celery 的 broker 时，celery 的交互操作同 redis 中数据记录的关联关系。 不在乎过程的，可以直接看最后的结论。 测试代码： > # a.py from celery import Celery celery_app = Celery('a', broker='redis://localhost:6379/0') @celer...
Django|Redis|Celery 配置与部署
蓦默的博客
12-30 2851
引言 安装 Django Redis Celery 配置 使用 部署引言在django项目中，经常需要使用异步执行定时任务，如定时发送邮件、清空数据等，celery是很好的选择。本文介绍了使用redis作为broker的celery的使用和部署。安装Django + Redisdjango与celery相关的安装已经在之前写过，这里不再赘述。详见Django|Nginx|Uwsgi|Redis|W
celery动态设置定时任务实践
wuliwawa的博客
04-16 3654
首先celery是一种异步任务队列，如果还不熟悉这个开源软件的请先看看官方文档，快速入门。 这里讲的动态设置定时任务的方法不使用数据库保存定时任务的信息，所以是项目重启后定时任务配置就会丢失，如果想保存成永久配置，可以考虑保存到数据库、redis或者使用pickle、json保存成文件，在项目启动时自动载入。 方法原理介绍 先来看一下celery的beat运行过程。 上图是beat的主...
python+django+djcelery 入门级踩坑
热门推荐
Michael_Lbs的博客
07-10 1万+
开始: 首先安装django-celery，使用Redis作为Broker还需要安装celery-with-redis： pip install django-celery pip install celery-with-redis sudo apt-get install redis-server如果没有redis-server则不能开启redis默认的6379端口, 在后
Django中celery和redis怎么配合使用
03-24
在Django中，Celery和Redis通常一起使用来实现异步任务处理和任务队列管理。具体来说，你需要在settings.py中设置一些参数以指定Celery使用的Redis实例。你可以使用以下示例代码来配置Celery和Redis： ```python # ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值