Django 使用定时任务

最新推荐文章于 2024-09-21 20:27:38 发布
最新推荐文章于 2024-09-21 20:27:38 发布
阅读量6.5k 收藏 14
点赞数 3
文章标签： django python 后端
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_69082030/article/details/126942735
版权

文章目录

前言

Windows 系统进行 Django 开发工作，然后原来使用的django-crontab插件没办法在Windows系统上面进行定时任务。因此又想了其他方式来实现定时任务。下面就来说说这些方案的优缺点。

使用django-crontab插件来实现定时任务

安装庫

pip install django-crontab

注冊app

在settings.py中的 INSTALLED_APPS注冊app

INSTALLED_APPS = [
    ...
    'django_crontab'
]

在settings.py中配置定时任务

"""
# 元素的第一个参数是 频次(多久一次)
*  *  *  * *
分 时 日 月 周    命令

M: 分钟（0-59）。每分钟用 * 或者 */1 表示
H：小时（0-23）。（0表示0点）
D：天（1-31）。
m: 月（1-12）。
d: 一星期内的天（0~6，0为星期天）。

*/5 * * * * ---- 每5分鐘執行一次

# 元素的第二个参数是 定时任务（函数）

finally run this command to add all defined jobs from CRONJOBS to crontab (of the user which you are running this command with):
在終端運行: python manage.py crontab add

show current active jobs of this project:
在終端運行: python manage.py crontab show

removing all defined jobs is straight forward:
在終端運行: python manage.py crontab remove
"""
crontab 只在Linux下才能使用
CRONJOBS = [
    ('*/5 * * * *', 'myapp.cron.my_scheduled_job', ' >> /tmp/logs/confdict_handle.log')
]

编写定时任务方法

在子應用新建 crontabs.py 文件，寫入定时任务

import datetime

# 定时任务
def confdict_handle():
    try:
        loca_time = datetime.datetime.now().strftime('%Y-%m-%d %H:%M:%S')
        print('本地时间：'+str(loca_time))
    except Exception as e:
        print('发生错误，错误信息为：', e)

使用&运行

开启定时器

python manage.py crontab add

查看开启的定时器

python manage.py crontab show

关闭定时器

python manage.py crontab remove

优缺点

优点：
简单、方便、易于管理和django服务是分离的，不会影响到django对外提供的web服务。
缺点：
无法在Windows平台上运行
官方文檔：
在这里插入图片描述

就算在Linux系统上，也可能出现运行了没有效果的消息，至今未知原因

使用django-apscheduler插件实现定时任务

安装庫

pip install django-apscheduler

注冊app

修改settings.py

INSTALLED_APPS = (
  ...
  "django_apscheduler",
)

迁移数据库

因为django-apscheduler会创建表来存储定时任务的一些信息，所以将app加入之后需要迁移数据

python manage.py migrate

完整示例 在views.py中增加你的定时任务代码

from apscheduler.schedulers.background import BackgroundScheduler # 使用它可以使你的定时任务在后台运行
from django_apscheduler.jobstores import DjangoJobStore, register_events, register_job
import time
'''
date：在您希望在某个特定时间仅运行一次作业时使用
interval：当您要以固定的时间间隔运行作业时使用
cron：以crontab的方式运行定时任务
minutes：设置以分钟为单位的定时器
seconds：设置以秒为单位的定时器
'''

try:
    scheduler = BackgroundScheduler()
    scheduler.add_jobstore(DjangoJobStore(), "default")

    @register_job(scheduler, "interval", seconds=5)
    def test_job():
        # 定时每5秒执行一次
        print(time.strftime('%Y-%m-%d %H:%M:%S'))

    register_events(scheduler)
    # 启动定时器
    scheduler.start()
except Exception as e:
    print('定时任务异常：%s' % str(e))

使用&运行

apscheduler定时任务会跟随django项目一起运行因此直接启动django即可

python manage.py runserver

詳細查看另一篇文章: django-apscheduler

优缺点

优点：
简单、定时方式丰富、轻量
缺点：
定时任务会跟随django项目一起运行，会影响django对外提供的web服务
使用uwsgi线上运行时，很难启动apscheduler定时任务
按照文档上的设置–enable-threads依然没有正常启动，具体原因未知，也查了很多方法，都没有解决。并且也不建议将定时任务和uwsgi放在一起运行，这样定时任务在运行过程中可能会影响uwsgi的服务。

使用Celery插件实现定时任务

介紹

"""
生产者（任务，函数）
    @app.task
    def celery_send_sms_code(mobie,code):

        CCP().send_template_sms(mobie,[code,5],1)


    app.autodiscover_tasks(['celery_tasks.sms'])
消费者
    celery -A proj worker -l INFO

    在虚拟环境下执行指令
    celery -A celery实例的脚本路径 worker -l INFO

    本案例使用
    celery -A celery_tasks.main worker -l INFO

队列（中间人、经纪人）
    #2. 设置broker
    # 我们通过加载配置文件来设置broker
    app.config_from_object('celery_tasks.config')

    # 配置信息 key=value
    # 我们指定 redis为我们的broker(中间人，经纪人，队列)
    broker_url="redis://127.0.0.0:6379/15"

Celery -- 将这3者实现了。

    # 0. 为celery的运行 设置Django的环境
    import os
    os.environ.setdefault('DJANGO_SETTINGS_MODULE', 'meiduo_mall.settings')

    # 1. 创建celery实例
    from celery import Celery
    # 参数1： main 设置脚本路径就可以了。 脚本路径是唯一的
    app=Celery('celery_tasks')
"""

安装庫

本例建立在认为你已经知道如何使用Celery实现异步任务的基础上，需要学习的请移步Django使用Celery,可參考另一篇博客：celery异步—生产者消费者，或者官方文檔：官方文檔
本例使用redis作为Borker和backend

pip install -U "celery[redis]"

配置celery

settings.py 增加以下代码

# Celery配置
from kombu import Exchange, Queue
# 设置任务接受的类型，默认是{'json'}
CELERY_ACCEPT_CONTENT = ['application/json']
# 设置task任务序列列化为json
CELERY_TASK_SERIALIZER = 'json'
# 请任务接受后存储时的类型
CELERY_RESULT_SERIALIZER = 'json'
# 时间格式化为中国时间
CELERY_TIMEZONE = 'Asia/Shanghai'
# 是否使用UTC时间
CELERY_ENABLE_UTC = False
# 指定borker为redis 如果指定rabbitmq CELERY_BROKER_URL = 'amqp://guest:guest@localhost:5672//'
CELERY_BROKER_URL = 'redis://127.0.0.1:6379/0'
# 指定存储结果的地方，支持使用rpc、数据库、redis等等，具体可参考文档 # CELERY_RESULT_BACKEND = 'db+mysql://scott:tiger@localhost/foo' # mysql 作为后端数据库
CELERY_RESULT_BACKEND = 'redis://127.0.0.1:6379/1'
# 设置任务过期时间 默认是一天，为None或0 表示永不过期
CELERY_TASK_RESULT_EXPIRES = 60 * 60 * 24
# 设置worker并发数，默认是cpu核心数
# CELERYD_CONCURRENCY = 12
# 设置每个worker最大任务数
CELERYD_MAX_TASKS_PER_CHILD = 100
# 指定任务的位置
CELERY_IMPORTS = (
    'base.tasks',
)
# 使用beat启动Celery定时任务
# schedule时间的具体设定参考：https://docs.celeryproject.org/en/stable/userguide/periodic-tasks.html
CELERYBEAT_SCHEDULE = {
    'add-every-10-seconds': {
        'task': 'base.tasks.cheduler_task',
        'schedule': 10,
        'args': ('hello', )
    },
}

编写定时任务代码

在本例中是在子應用新建 tasks.py 在裏面增加的定时任务

# Create your tasks here
from __future__ import absolute_import, unicode_literals
from celery import shared_task
import time

@shared_task
def cheduler_task(name):
    print(name)
    print(time.strftime('%X'))

使用&运行

启动定时任务

celery -A dase_django_api beat -l info

启动Celery worker 用来执行定时任务

celery -A dase_django_api worker -l -l info

注意：这里的 dase_django_api 要换成你的Celery APP的名称

优缺点

优点：
稳定可靠、管理方便
高性能、支持分布式
缺点：
实现复杂
部署复杂
非轻量级

自建代码实现定时任务

创建定时任务

在子應用下创建一个文件名为 schedules.py，键入以下内容

import os, sys, time, datetime
import threading
import django
base_apth = os.path.dirname(os.path.dirname(os.path.dirname(os.path.abspath(__file__))))
# print(base_apth)
# 将项目路径加入到系统path中，这样在导入模型等模块时就不会报模块找不到了
sys.path.append(base_apth)
os.environ['DJANGO_SETTINGS_MODULE'] ='base_django_api.settings' # 注意：base_django_api 是我的模块名，你在使用时需要跟换为你的模块
django.setup()
from base.models import ConfDict

def confdict_handle():
    while True:
        try:
            loca_time = datetime.datetime.now().strftime('%Y-%m-%d %H:%M:%S')
            print('本地时间：'+str(loca_time))
            time.sleep(10)
        except Exception as e:
            print('发生错误，错误信息为：', e)
            continue


def main():
    '''
    主函数，用于启动所有定时任务，因为当前定时任务是手动实现，因此可以自由发挥
    '''
    try:
        # 启动定时任务，多个任务时，使用多线程
        task1 = threading.Thread(target=confdict_handle)
        task1.start()
    except Exception as e:
        print('发生异常：%s' % str(e))

if __name__ == '__main__':
    main()

使用&运行

直接运行脚本即可

python apps/base/schedules.py

注意：apps/base 為你的子應用路徑

优缺点

优点：
自定义
高度自由
缺点：
过于简单
当任务过多时，占用资源也会增加

名难取aaa
关注
django使用django-apscheduler 实现定时任务的例子
09-19
今天小编就为大家分享一篇django使用django-apscheduler 实现定时任务的例子，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
Django实现定时任务
Lucas在澳洲
06-19 1315
实现一个定时任务需要使用Django中的Celery和Django-crontab。Celery是一个分布式任务队列，可以让我们异步执行耗时的任务，而Django-crontab是一个基于Celery的Django定时任务调度库。现在，每个小时的0分钟时，Celery会自动执行write_article任务，你可以在任务函数中编写你的写文章逻辑，例如创建一个新的Article模型并将其保存到数据库中。
django实现celery自定义定时任务 django-celery-beat实现自定义定时任务的实战菜鸟教程
最新发布
daotianmi的专栏
09-21 1363
1、创建文件2、添加序列化对象return ''添加如下代码"""获取注册任务列表"""# 自定义搜索"""保存间隔数据，移除id方便插入新的数据规则如果有则采用之前的规则没有则新建此设计时为了保证数据更换规则之后不影响其他的数据"""try:else:raise ParseError({'msg': '时间策略数据错误！'})try:else:print(e)raise ParseError({'msg': '时间策略数据错误！
django实现定时任务
sinat_23377479的博客
03-14 1386
最近想加一个定时执行自动化测试用例的功能，本身平台是用django开发的，度了一下，绝大部分都是推荐django-crontab，可是我搞半天都没有定时执行任务。 去官网查django-crontab，发现这东西2016年之后就没有更新了。手动执行是正常的，但是没有定时运行，并且日志文件也是空空如也。 搜了半天也没找到解决方案，只要换个方案，下面的方案亲自试验有效： 1）在你的某个应用下新建Python package，命名为management，新增成功后文件下会自动生成 __init__.py
Django项目定时任务--django-crontab
YUE
08-02 4713
Django项目设置定时任务以及django-crontab的使用
Django 定时任务
Zamo.的博客
09-27 1364
本文介绍怎么在一个django的项目里增加定时任务。 使用的框架为APScheduler， 安装APScheduler: 1 pip install apscheduler==2.1.2  安装完成后，打开django web 项目的urls.py 增加以下内容： 1 2 3 4 5 6 7 ...
使用 Django 实现定时任务
Code掘金的博客
06-03 1241
Celery 是一个 Python 分布式任务队列，它可以用来在后台执行异步任务。通过结合Django 和 Celery，我们可以很方便地实现定时任务功能。
django定时任务
Tester_muller的博客
08-25 952
使用下面的命令将定时任务写入系统的crontab中，在系统中使用crontab –l可以看到。最近在做django项目时，需要在项目运行过程中运行定时任务，下面是调研的几种方法。说明：定时器一般只用于linux系统，linux本身带了crontab的定时任务功能。‘django_apscheduler’,#定时执行任务。1、安装：pip install django-crontab。django定时任务。...
Django定时任务
pygodnet的博客
10-30 242
Django定时任务 安装django-crontab并加入到settings.py的INSTALLED_APPS pip install django-crontab settings.py中加入django-crontab的命令即可，命令参考linux crontab CRONJOBS = [ ('47 11 * * *', 'django.core.management.call_command', ['closepoll']，{},'>> /var/run.log'), ]
详解django中使用定时任务的方法
09-20
在Django中实现定时任务是许多Web开发者需要掌握的重要技能，这通常用于执行一些后台的定期操作，比如数据同步、清理缓存或发送邮件等。本文将详细介绍两种在Django中设置定时任务的方法：APScheduler和django-...
Django如何防止定时任务并发浅析
09-19
总结来说，要防止Django定时任务的并发执行，可以采取文件锁策略。通过创建一个文件锁装饰器，将其应用到`commands`的`handle`方法上，确保每次只有一个实例在执行任务。这种方法简单且可靠，适用于大部分情况。在...
Django crontab定时任务模块操作方法解析
12-17
Django crontab 是一个非常实用的...通过以上步骤，你可以在Django项目中有效地使用`django-crontab`模块来创建和管理定时任务。这使得开发者可以在Python环境中处理那些需要定期执行的逻辑，而无需深入Linux系统层面。
Django实现定时任务和邮件功能
热门推荐
Mr数据杨
10-13 2万+
文本初衷是为了实现在项目中设置定时任务，通过定时任务备份数据并发送到指定的邮箱中。
django-crontab 定时任务
是什么让你停止不前？
11-09 871
定时任务 对于首页的静态化，考虑到页面的数据可能由多名运营人员维护，并且经常变动，所以将其做成定时任务，即定时执行静态化。 在Django执行定时任务，可以通过django-crontab扩展来实现。 1. 安装 pip install django-crontab 2. 添加应用 INSTALLED_APPS = [ ... 'django_crontab', # 定时任...
Django 使用Apscheduler执行定时任务
gongzairen的博客
06-17 757
Django 使用ApScheduler实现定时任务
Django框架使用定时器-APScheduler实现定时任务：django实现简单的定时任务
weixin_46371752的博客
08-15 4796
django实现简单定时任务，django使用APScheduler实现定时任务，django怎么实现定时任务，django怎么实现定时任务，django配置定时任务，django配置简单的定时任务
django 定时任务
Morgan Wang 的博客
06-07 592
#正常启动 python3.7 manage.py celery worker -A MxOnline --loglevel=info # debug 启动 python3.7 manage.py celery worker -A MxOnline -l debug # 监控定是脚本 python3.7 manage.py celery beat --loglevel=info 定时任务添...
Django 通过django_crontab实现定时任务
weixin_46415067的博客
06-23 391
定时任务 首先下载django_crontab第三方库，在settings中注册app 配置定时任务时区语言问题 CRONTAB_COMMAND_PREFIX = 'LANG_ALL=zh_cn.UTF-8' 创建对应的定时文件目录（以便于管理和维护），在文件目录中创建定时任务 在get_month_cycle.py中写入要执行的函数 def get_month_cycle(): print("执行月循环任务") 这里的print会被打印到指定位置 在settings中设置定时
django celery定时任务
12-22
在Django中使用Celery和django-celery-beat可以实现定时任务或周期性任务。下面是两种添加定时任务的方式： 1. 在celery.py中添加任务： 在你的项目中的celery.py文件中，你可以定义定时任务。首先，确保你已经安装了django-celery-beat，并将其添加到INSTALLED_APPS中。然后，在celery.py文件中添加以下代码： ```python from celery import Celery from django.conf import settings app = Celery('your_project_name') app.config_from_object('django.conf:settings', namespace='CELERY') app.autodiscover_tasks(lambda: settings.INSTALLED_APPS) @app.on_after_configure.connect def setup_periodic_tasks(sender, **kwargs): # 添加定时任务 sender.add_periodic_task(10.0, your_task.s(), name='your_task_name') @app.task def your_task(): # 定时任务的具体逻辑 pass ``` 在上面的代码中，`your_project_name`是你的项目名称，`your_task_name`是你给定时任务起的名字，`your_task`是你要执行的具体任务。 2. 通过Django admin后台添加任务： django-celery-beat还提供了通过Django admin后台添加定时任务的方式。首先，在settings.py文件中添加`'django_celery_beat'`到INSTALLED_APPS中。然后，在终端运行以下命令创建数据库迁移： ```shell python manage.py makemigrations python manage.py migrate ``` 接下来，你可以通过访问Django admin后台来添加定时任务。在后台中，你可以设置任务的名称、任务的类型（定时任务或周期性任务）、任务的执行时间等。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值