如何让你的Python程序，定时定点地去执行任务？

最新推荐文章于 2024-05-21 13:13:56 发布
最新推荐文章于 2024-05-21 13:13:56 发布
阅读量280 收藏 5
点赞数 3
分类专栏： 程序员 文章标签： python php 开发语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2401_83704192/article/details/138085534
版权

④ Python基础入门、爬虫、网络开发、大数据分析方面的视频（适合小白学习）

⑤ Python学习路线图（告别不入流的学习）

Python学习交流Q群101677771

类型

解释

DateTrigger

到期执行(到xxxx年x月x日 x时x分x秒执行) 对应DateTrigger

IntervalTrigger

间隔执行（每5秒执行一次）

CronTrigger

一个crontab类型的条件（这个比较复杂，比如周一到周四的4-5点每5秒执行一次）

作业存储(job store)存储被调度的作业，默认的作业存储是简单地把作业保存在内存中，其他的作业存储是将作业保存在数据库中。一个作业的数据讲在保存在持久化作业存储时被序列化，并在加载时被反序列化。调度器不能分享同一个作业存储。

Jobstore在scheduler中初始化，另外也可通过scheduler的add_jobstore动态添加Jobstore。每个jobstore

都会绑定一个alias，scheduler在Add Job时，根据指定的jobstore在scheduler中找到相应的jobstore，并

将job添加到jobstore中。

Jobstore主要是通过pickle库的loads和dumps【实现核心是通过python的__getstate__和__setstate__重写

实现】，每次变更时将Job动态保存到存储中，使用时再动态的加载出来，作为存储的可以是redis，也可以

是数据库【通过sqlarchemy这个库集成多种数据库】，也可以是mongodb等

目前APScheduler支持的Jobstore：

MemoryJobStore

MongoDBJobStore

RedisJobStore

RethinkDBJobStore

SQLAlchemyJobStore

ZooKeeperJobStore

执行器(executor)处理作业的运行，他们通常通过在作业中提交制定的可调用对象到一个线程或者进城池来进行。当作业完成时，执行器将会通知调度器。

  • 说人话就是添加任务时候用它来包装的，executor的种类会根据不同的调度来选择，如果选择AsyncIO作为调度的库，那么选择AsyncIOExecutor，如果选择tornado作为调度的库，选择TornadoExecutor，如果选择启动进程作为调度，选择ThreadPoolExecutor或者ProcessPoolExecutor都可以Executor的选择需要根据实际的scheduler来选择不同的执行器

目前APScheduler支持的Executor：

AsyncIOExecutor

GeventExecutor

ThreadPoolExecutor

ProcessPoolExecutor

TornadoExecutor

TwistedExecutor

调度器(scheduler)是其他的组成部分。你通常在应用只有一个调度器，应用的开发者通常不会直接处理作业存储、调度器和触发器，相反，调度器提供了处理这些的合适的接口。配置作业存储和执行器可以在调度器中完成，例如添加、修改和移除作业.

Scheduler是APScheduler的核心，所有相关组件通过其定义。scheduler启动之后，将开始按照配置的任务进行调度。

除了依据所有定义Job的trigger生成的将要调度时间唤醒调度之外。当发生Job信息变更时也会触发调度。

scheduler可根据自身的需求选择不同的组件，如果是使用AsyncIO则选择AsyncIOScheduler，使用tornado则

选择TornadoScheduler。

目前APScheduler支持的Scheduler：

AsyncIOScheduler

BackgroundScheduler

BlockingScheduler

GeventScheduler

QtScheduler

TornadoScheduler

TwistedScheduler

简单应用

====

import time

from apscheduler.schedulers.blocking import BlockingScheduler # 引入后台

def my_job():

print time.strftime(‘%Y-%m-%d %H:%M:%S’, time.localtime(time.time()))

sched = BlockingScheduler()

sched.add_job(my_job, ‘interval’, seconds=5)

sched.start()

完整代码

====

trigeers 触发器

job stores job 存储

executors 执行器

schedulers 调度器

from pytz import utc

from sqlalchemy import func

from apscheduler.schedulers.background import BackgroundScheduler,AsyncIOScheduler

from apscheduler.jobstores.sqlalchemy import SQLAlchemyJobStore

from apscheduler.executors.pool import ProcessPoolExecutor

jobstores = {

可以配置多个存储

#‘mongo’: {‘type’: ‘mongodb’},

‘default’: SQLAlchemyJobStore(url=‘sqlite:///jobs.sqlite’) # SQLAlchemyJobStore指定存储链接

}

executors = {

‘default’: {‘type’: ‘threadpool’, ‘max_workers’: 20}, # 最大工作线程数20

‘processpool’: ProcessPoolExecutor(max_workers=5) # 最大工作进程数为5

}

job_defaults = {

‘coalesce’: False, # 关闭新job的合并，当job延误或者异常原因未执行时

‘max_instances’: 3 # 并发运行新job默认最大实例多少

}

scheduler = BackgroundScheduler()

… do something else here, maybe add jobs etc.

scheduler.configure(jobstores=jobstores, executors=executors, job_defaults=job_defaults, timezone=utc) # utc作为调度程序的时区

import os

import time

def print_time(name):

print(f’{name} - {time.ctime()}')

def add_job(job_id, func, args, seconds):

“”“添加job”“”

print(f"添加间隔执行任务job - {job_id}")

scheduler.add_job(id=job_id, func=func, args=args, trigger=‘interval’, seconds=seconds)

def add_coun_job(job_id, func, args, start_time):

“”“添加job”“”

print(f"添加一次执行任务job - {job_id}")

scheduler.add_job(id=job_id, func=func, args=args, trigger=‘date’,timezone=‘Asia/Shanghai’, run_date=start_time)

scheduler.add_job(func=print_time, trigger=‘date’,timezone=‘Asia/Shanghai’, run_date=datetime(2022, 2, 19, 17, 57, 0).astimezone(), args=[‘text2’])

def remove_job(job_id):

“”“移除job”“”

scheduler.remove_job(job_id)

print(f"移除job - {job_id}")

def pause_job(job_id):

“”“停止job”“”

scheduler.pause_job(job_id)

print(f"停止job - {job_id}")
自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数Python工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年Python开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

img

img

img

img

img

img

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上前端开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以扫码获取！！！（备注：Python）

6381401c05e862fe4e9.png)

img

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上前端开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以扫码获取！！！（备注：Python）

2401_83704192
关注
  • 3
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Python实现定时执行任务的三种方式简单示例
09-19
主要介绍了Python实现定时执行任务的三种方式,结合简单实例形式分析了Python使用time,os,sched等模块定时执行任务的相关操作技巧,需要的朋友可以参考下
python定时任务 每天运行一次.md
03-26
python定时任务 每天运行一次 在 Python 中可以使用 schedule 模块来实现定时任务。以下是一个每天运行一次的例子： import schedule import time def job(): print("I'm running at 5:00am every day.") # 设定...
Python - 定时任务框架【APScheduler】基本使用详解(一)
Mr_WoLong
06-27 3253
Python - 定时任务框架【APScheduler】基本使用详解(一)
Django-Apscheduler定时任务
Zzzzzz的博客
01-29 1313
当作业完成时，执行器将会通知调度器。django-crontab 最简单，类似crontab的方法进行定时任务的设置，但不支持Windows平台。django-celery 非常晚上的定时任务库，但通常需要结合redis、es等中间件结合使用，重。标准库（Windows下没有，默认会报错）实现文件锁，以此来规定只有一个进程执行定时任务。django-apscheduler 能够跨平台，能够设置多种定时任务，轻量级首选。任务持久化仓库，默认保存任务在内存中，也可将任务保存都各种数据库中。
Python APScheduler 教程 – 高级任务调度
昔明日
03-21 751
由于APScheduler不包含在Python标准库中，因此需要单独下载。您可以使用 pip 执行此操作。如果您对作为标准库一部分的计划库感兴趣，请查看此库。有 4 个主要组件组成了 Python APScheduler 库。触发器– 负责计划逻辑，并决定何时执行作业。作业存储– 顾名思义，这定义了存储所有计划作业的区域。默认存储只是将所有作业存储在内存中。但对于更专业的用例，您可以将它们存储在数据库（如 SQL）中。执行程序– 处理作业的运行。调度程序– 将所有内容绑定在一起的主干。
apscheduler 实现mongoDB作业存储
liyacai_20120512的博客
12-13 1120
初始化配置 from apscheduler.schedulers.background import BackgroundScheduler from apscheduler.jobstores.mongodb import MongoDBJobStore, MongoClient from apscheduler.executors.pool import ThreadPoolExecutor, ProcessPoolExecutor from conf import config jobstores
python每天定时执行任务
12-20
使用方法介绍：https://www.bilibili.com/video/BV1tR4y1W7ec/
Python定时任务随机时间执行的实现方法
12-26
有一个爬虫服务，需要定时从公开网站上拉取一些数据，为了避免被识别为爬虫（防爬虫的识别需要根据很多特征，时间仅仅是其中一个维度），需要在指定的时间内，随机生成一个时间爬取 脚本是python写的，直接上代码… ...
python定时任务框架APScheduler简介
记录日常开发过程中遇到的一些问题
03-02 2417
一、官方文档 APScheduler，全称是Advanced Python Scheduler，是 Python 中一个比较轻量级的定时任务库了，基于 Quartz。具体的介绍可以看官网或者官方API文档的文档介绍。 二、APScheduler 内置调度系统简介： APScheduler 内置了三种调度系统： Linux Cron 风格的调度系统（并有可选的开始和结束时间） 基于时间间隔的执行调度（周期性地运行作业 job ，并有可选的开始和结束时间） 只执行一次的延后执行作业调度...
apscheduler的持久化存储
hqzxsc2006的专栏
05-08 5965
1、mysql url="mysql+pymysql://user:passwd@host/dbname?charset=utf8" job.scheduler.add_jobstore(jobstore="sqlalchemy",url=url,tablename='api_job') 2、sqlite from apscheduler.schedulers.background import...
APScheduler浅析
把握自己。
01-23 2860
前言 APScheduler是python下的任务调度框架，全程为Advanced Python Scheduler，是一款轻量级的Python任务调度框架。它允许你像Linux下的Crontab那样安排定期执行的任务，并且支持Python函数或任意可调用的对象。 安装 (ENV1) [eason@localhost]$ pip install apscheduler Collect
Python中定时任务框架APScheduler的快速入门指南
Nicholas的专栏
01-04 4684
APScheduler是基于Quartz的一个Python定时任务框架，实现了Quartz的所有功能，使用起来十分方便。下面这篇文章主要跟大家介绍了Python中定时任务框架APScheduler的快速入门指南，需要的朋友可以参考借鉴，下面来一起看看吧。 前言 大家应该都知道在编程语言中，定时任务是常用的一种调度形式，在Python中也涌现了非常多的调度模块，本文将简要介绍
使用Python操作excel单元格——在单元格中插入公式
xll_007的博客
05-16 368
使用Python操作excel单元格——在单元格中插入公式。 通过使用Python的openpyxl库，来操作excel单元格，在单元格中插入公式的操作。把学习的过程分享给大家。大佬勿喷！
geopandas快速入门报错1
weixin_45213317的博客
05-19 174
报错：CRSError: Invalid projection: EPSG:4326: (Internal Proj Error: proj_create: no database context specified)解决方法：重新下载适合自己Python版本的pyproj安装。
Gradio 案例——将 dicom 文件转为 nii文件
蒋含竹的博客
05-15 363
Gradio 的WEB界面案例：利用 SimpleITK 库，将 dicom 文件转为 nii文件
jQuery知识点（二）
最新发布
shsjssnn的博客
05-21 471
1.获取节点： 通过各种选择器或选择器的组合来获取想要的网页元素。 2.创建节点： 元素节点通过工厂函数$()直接创建，文本节点和属性节点可以随着元素节点创建时一起创建，也可以通过先创建元素节点，再使用操作内容和属性的方法产生。 3.插入节点： append()、prepend(): 是父元素的方法 appendTo()、prependTo(): 是要插入的节点的方法 before()、after(): 是要插入
使用XPath来解析网页数据
2301_80263861的博客
05-18 742
首先是定位到超链接为“link4.html”的 a 标签，然后向上翻一级，也就是到了 li 元素，然后再查找这个 a 标签对应的 li 的 class 属性值，即最后的输出为[‘item-1’]第一种是访问class属性为“item-0”的 li 标签下的文字，但是在这行代码里面，li 标签的下一级是 a 标签，没有文字，只有换行符，所以输出也就是['\n ']获取class属性值含 “li” 和 name 属性值为 “item” 的 li 标签下的 a 标签的文字部分。
python实现定时任务执行程序
12-02
以下是Python实现定时任务的几种方法： 1. 使用while True和time.sleep()函数实现定时任务 ```python import time def some_task(): print("This is a timed task.") while True: some_task() time.sleep(60) # 每隔60秒执行一次任务 ``` 2. 使用threading.Timer定时器实现定时任务 ```python import threading def some_task(): print("This is a timed task.") def timer(): some_task() timer = threading.Timer(60, timer) # 每隔60秒执行一次任务 timer.start() timer() ``` 3. 使用Timeloop库实现定时任务 ```python from timeloop import Timeloop from datetime import timedelta tl = Timeloop() @tl.job(interval=timedelta(seconds=60)) def some_task(): print("This is a timed task.") tl.start(block=True) ``` 4. 使用调度模块sched实现定时任务 ```python import sched import time s = sched.scheduler(time.time, time.sleep) def some_task(): print("This is a timed task.") s.enter(60, 1, some_task, ()) # 每隔60秒执行一次任务 s.enter(60, 1, some_task, ()) s.run() ``` 5. 使用任务框架APScheduler实现定时任务 ```python from apscheduler.schedulers.blocking import BlockingScheduler def some_task(): print("This is a timed task.") scheduler = BlockingScheduler() scheduler.add_job(some_task, 'interval', seconds=60) # 每隔60秒执行一次任务 scheduler.start() ``` 6. 使用分布式消息系统celery执行定时任务 ```python from celery import Celery from datetime import timedelta app = Celery('tasks', broker='pyamqp://guest@localhost//') @app.task def some_task(): print("This is a timed task.") app.conf.beat_schedule = { 'some_task': { 'task': 'tasks.some_task', 'schedule': timedelta(seconds=60), # 每隔60秒执行一次任务 }, } app.conf.timezone = 'UTC' ``` 7. 使用Windows自带的定时任务 在Windows系统中，可以使用计划任务来实现定时任务。具体操作可以参考Windows系统的相关文档。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值