airflow 定时任务+时间设定+cron表达式

from airflow import DAG
from airflow.operators.bash_operator import BashOperator
from datetime import datetime, timedelta
 
'''任务参数配置'''
default_args = {
    "owner": "airflow",  # 用户名的任务的所有者
    "depends_on_past": False,  # 当设置为true时,任务实例将依次运行,同时依赖上一个任务的计划成功。允许start_date的任务实例运行。
    "start_date": datetime(2018, 12, 1),  # 开始时间
    "email": ["airflow@airflow.com"],
    "email_on_failure": False,#
    "email_on_retry": False,#邮件重发
    "retries": 1,  # 重试策略 (这里是重试一次)
    "retry_delay": timedelta(seconds=5),#每五秒重试一次
    "dag_concurrency": 1,  # 调度器允许并发运行的任务实例的数量
    "max_active_runs_per_dag": 1  # 每个DAG的最大活动DAG运行次数
    # 'queue': 'bash_queue',#运行此作业时要定位到哪个队列
    # 'pool': 'backfill',
    # 'priority_weight': 10,
    # 'end_date': datetime(2016, 1, 1),
 
}
#schedule_interval 是要自己设置的时间格式在底下 cron
 
dag = DAG("Day", default_args=default_args, schedule_interval='0 8 * * 1-5 0')
t1 = BashOperator(
    task_id="update_kl_DayMin",  # 任务的唯一,有意义的id
    bash_command='python /usr/local/airflow/dags/Day.py ',  # 要执行的命令,命令集或对bash脚本(必须为'.sh')
    dag=dag,
)
 

schedule_interval 是任务时间设定:与Linux cron 时间是不同的

airflow cron 表达式: * * * * * * (分 时 月 年 周 秒)

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值