celery beat一直不触发任务（卡在Writing entries...）

最新推荐文章于 2024-05-21 18:02:18 发布
最新推荐文章于 2024-05-21 18:02:18 发布
阅读量2.5k 收藏 1
点赞数
分类专栏： Python入门到放弃
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Aqu415/article/details/118859975
版权
配置

依赖

......
Django==3.2
django-celery-beat==2.2.1
django-celery-results==2.2.0
psycopg2==2.9.1

最近在搞celery定时任务，不得不说这个时区方面的东西太坑人了，各种bug；
我设置了

TIME_ZONE = 'Asia/Shanghai'
USE_TZ = False
现象

在启动celery beat 命令的时候，明明配置了定时任务，但命令行启动后就是不往redis发任务，一直在writing object中（一直卡住…），worker一直消费不到消息；

<ModelEntry: test xxx.tasks.add(*[], **{}) <freq: 10.00 seconds>>
[2021-07-17 18:41:54,917: DEBUG/MainProcess] beat: Ticking with max interval->5.00 seconds
[2021-07-17 18:41:55,214: DEBUG/MainProcess] beat: Waking up in 5.00 seconds.
[2021-07-17 18:42:00,229: DEBUG/MainProcess] beat: Synchronizing schedule...
[2021-07-17 18:42:00,229: DEBUG/MainProcess] Writing entries...
[2021-07-17 18:42:00,479: DEBUG/MainProcess] beat: Waking up in 5.00 seconds.
[2021-07-17 18:42:05,698: DEBUG/MainProcess] beat: Waking up in 5.00 seconds.
[2021-07-17 18:42:10,979: DEBUG/MainProcess] beat: Waking up in 5.00 seconds.
[2021-07-17 18:42:16,152: DEBUG/MainProcess] beat: Waking up in 5.00 seconds.

经过这两天的研究得出初步结论：

  • 经过实验，把 USE_TZ 的值从False切换到True然后启动服务，保存任务，然后再切换回False，就会导致了这个celery扯怪叫，一直在 Writing entries…
  • 如果中间你切换了数据库链接，也会导致这个beat启动不了，一直在 Writing entries…
最终解决方法
  • 把celery beat相关的表里的数据全部删掉
  • 重新在页面定义周期和绑定任务
    这样做竟然成功了
操作建议
在使用 django-celery-beat 做开发过程中不用轻易的切换数据库和USE_TZ的值，否则会有意想不到的结果

相关代码已经上传到：gitee jump

万物皆字节
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
61 Celery Beat 任务调度
Jian Sun_的博客
10-31 2171
前面的任务调用都是手动触发的，本届将展示以下使用Celery的Beat进程自动调度任务。 Celery Beat是Celery的调度器，其定期启动任务，然后由集群中的可用工作节点worker执行这些任务。默认情况下，Beat进程读取配置文件中CELERYBEAT_SCHE-DULE的设置，也可以使用自定义存储，比如将启动任务的规则存储在SQL数据库中。请确保每次只为任务调度运行一个调度程序，否则任务将被重复执行。使用集群的方式意味着调度不需要同步，服务可以在不使用锁的情况下...
腾讯蓝鲸框架下Celery的使用
胖大xian
05-11 1471
腾讯蓝鲸框架下Celery的使用 Celery是一个异步任务队列/基于分布式消息传递的作业队列，它支持很多任务类型，例如后台任务，定时任务，周期性任务等 一、Celery的工作结构 首先，user发布任务，由boker（一个队列）进行获取。这里可以使用redis或者rabbitMq.接下来，由worker去获取任务进行执行，将执行结果放到store。 二、任务1 假如我们有一个业务，当用户登录我们系统之后，发现该用户的ip不在常用的地点时，就发送一个邮件给email进行确认。 假设我们的业务逻辑代码如下：
django-celery-beat 动态定时任务不生效处理方法。
qq_895043460的博客
11-29 4709
1. 安装 django-celery-beat pip install django-celery-beat 2.配置 server/settings.py INSTALLED_APPS = [ # ... 'django_celery_beat', ] # celery 定时任务 # 注意，celery4 版本后，CELERY_BROKER_URL 改为 BROKER_URL BROKER_URL = 'redis://127.0.0.1:6379/0' # Brok
django-celery-beat自动调度异步任务
最新发布
凡梦千华的博客
05-21 655
它支持使用任务队列的方式在分布的机器、进程、线程上执行任务调度。Celery不仅支持异步任务（如发送邮件、文件上传、图像处理等耗时操作），还支持定时任务，即需要在特定时间执行的任务。Celery本身不提供消息服务，需要借助RabbitMQ、Redis等消息中间件，本项目使用的是Redis。。它包含一个调度器，负责根据配置的时间表计划任务的执行。这些任务通常是Celery任务，即异步执行的函数或方法。
前方高能！硬核源码剖析 Celery Beat 调度原理
Python实用宝典网
07-12 1173
Celery 是一个简单、灵活且可靠的，处理大量消息的分布式系统，它是一个专注于实时处理的任务队列，同时也支持任务调度。为了讲解 Celery Beat 的周期调度机制及实现原理，我们会基...
解决Celery进程重启后，正在进行中的任务丢失或者标记为失败
09-23 7051
修改配置如下：task_reject_on_worker_lost = True task_acks_late = True该配置可以保证task不丢失，中断的task在下次启动时将会重新执行。task_reject_on_worker_lost作用是当worker进程意外退出时，task会被放回到队列中 task_acks_late作用是只有当worker完成了这个task时，任务才被标记为ac
关于celery的worker运行过程中卡住的问题
这里是标题
03-08 1万+
Celery Solution for hanging workers 两种解决方式：1. 如果确认是应为当前worker的并发是prefork（多进程）,并且可能是由于死锁原因造成！    那么可以使用 CELERYD_FORCE = True ，这样可以有效防止死锁。即使不是这个原因造成的，也尽量加上。    注意：这种处理方式在4.0之后的版本不支持了，使用时需检查版本，也可采用下面的方式2...
不使用数据库动态设置定时任务-celery_demo.zip
01-30
【标题】：“不使用数据库动态设置定时任务-celery_demo.zip”揭示了如何在不依赖数据库的情况下使用Celery框架创建和管理定时任务。Celery是一个分布式任务队列，广泛用于处理异步任务和定时调度。 【描述】：“不...
node-celery：Node.js的Celery客户端
02-04
如果您不熟悉Celery，请访问用法简单示例，包含在： var celery = require ( 'node-celery' ) ,client = celery . createClient ( {CELERY_BROKER_URL : 'amqp://guest:guest@localhost:5672//' ,CELERY_RESULT_...
Django-celery-beat动态添加周期性任务实现过程解析
01-19
1.beat插件安装 pip3 install django-celery-beat 2.注册APP INSTALLED_APPS = [ …. ‘django_celery_beat’, ] 3.数据库变更 python3 manage.py migrate django_celery_beat 配置工作 目录结构请参考：//...
django-celery-beat, Django ORM支持的celery 周期任务.zip
09-17
django-celery-beat, Django ORM支持的celery 周期任务 数据库后台任务 版本：站点：下载：关键字：关键字：1.1.1http://django-celery-beat.readthedocs.io/http://pypi.python.org/pypi
redbeat:RedBeat是Celery Beat Scheduler，可在Redis中存储计划的任务和运行时元数据
05-02
Beat与单个驱动器或计算机无关即使有大量任务也可以快速启动防止意外运行多个Beat服务器有关RedBeat起源的更多背景信息，请参阅此入门用pip安装： pip install celery-redbeat 在Celery配置文件中配置RedBeat设置：...
django:celery beat执行报错
Mr_wulongyu的博客
05-05 834
报错内容 TypeError: can't compare offset-naive and offset-aware datetimes 分析 时区设置问题；项目设置了时区，celery 也设置了时区，格式不一致无法进行比较；因为我们制定celery beat是定时任务创建，时区不一致无法准确执行。 解决 在项目setting文件添加配置 DJANGO_CELERY_BEAT_TZ_AWARE = False DJANGO_CELERY_BEAT_TZ_AWARE = False
celery beat实战
懒惰的帮主
08-14 1万+
测试CELERYBEAT的例子： celery_test     |proj         |__init__.py         |celery.py         |email_task.py         |calcu_tasks.py     start_server.sh     |proj_v1
celery 定时任务不执行，原因令人震惊...（版本4.1.0）
Arckal的博客
06-20 1万+
在使用celery 执行定时任务时，发现任务不会执行，schedule设置如下：经测试，如果去掉hour，则任务每分钟都会执行，说明是hour的问题，那只有是时区的问题了。遂将hour改为UTC的时间，发现任务可以执行，说明celery使用的是UTC时区，但我设置的时区如下：CELERY_TIMEZONE='Asia/Shanghai', CELERY_ENABLE_UTC=True,说明这两行...
celery 停止任务_如何向Celery动态添加/删除定期任务（celerybeat）
weixin_39868034的博客
12-19 863
这个问题在google网上论坛上得到了回答。我不是作者，所有功劳归Jean Jean这是一个适当的解决方案。确认可以正常工作，在我的场景中，我将“定期任务”子类化，并根据它创建了一个模型，因为我可以根据需要向模型中添加其他字段，也可以添加“终止”方法。您必须将定期任务的enabled属性设置为False并保存，然后再将其删除。整个子类不是必须的，schedule_every方法是真正起作用的方法。...
Celery定时任务
热门推荐
sicofield的专栏
03-20 4万+
Celery定时任务配置启用Celery的定时任务需要设置CELERYBEAT_SCHEDULE 。 Celery的定时任务都由celery beat来进行调度。celery beat默认按照settings.py之中的时区时间来调度定时任务。创建定时任务一种创建定时任务的方式是配置CELERYBEAT_SCHEDULE：#每30秒调用task.add from datetime import
celery简单实现异步任务和定时任务
IT之一小佬的博客
12-29 3171
celery简单实现异步任务和定时任务
django celery beat定时任务demo
06-08
好的，下面是一个简单的Django Celery Beat定时任务示例： 1. 安装Django Celery Beat：使用pip安装Django Celery Beat。 ``` pip install django-celery-beat ``` 2. 配置Django Celery Beat：在Django项目的settings.py中添加以下代码。 ``` INSTALLED_APPS = [ # ... 'django_celery_beat', # ... ] CELERY_BROKER_URL = 'amqp://guest:guest@localhost:5672//' CELERY_TIMEZONE = 'Asia/Shanghai' CELERY_BEAT_SCHEDULE = { 'add-every-30-seconds': { 'task': 'app.tasks.add', 'schedule': 30.0, 'args': (16, 16) }, 'add-every-monday-morning': { 'task': 'app.tasks.add', 'schedule': crontab(hour=7, minute=30, day_of_week=1), 'args': (32, 32) }, } ``` 3. 定义任务：在Django项目的tasks.py文件中定义一个简单的任务。 ``` from celery import task @task def add(x, y): return x + y ``` 4. 运行任务：在Django项目的manage.py文件中运行以下命令。 ``` python manage.py migrate python manage.py runserver celery -A your_project_name worker --loglevel=info celery -A your_project_name beat ``` 以上就是一个简单的Django Celery Beat定时任务示例。您可以根据自己的需求修改任务和定时任务的代码。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值