每天Get一个小技巧:用DolphinScheduler实现隔几天调度

转载自tuoluzhe8521

这篇小短文将教会你如何使用Apache DolphinScheduler实现隔几天调度,有此需求的小伙伴学起来!

1 场景分析

DolphinScheduler定时器模块-定时调度时每3秒|每3分钟|每3天这种定时,不能够跨分钟,跨小时,跨月,每次跨月等都会从每个月的第1天(第几天开始可以设定)开始重新计时。

file

为解决此问题,可以采用整天运行,并使用DolphinS cheduler自带的switch判断模块组合实现每隔几天的需求。

2 具体实现逻辑

由于switch模块只能做判断,不能做动态计算,因此需要单独计算参数.

2.1 计算参数

#此处按照每隔3天调度一次,并从2024-01-18开始计算
day_param1=$(( ($(date -d "${dt}" +%s)-1705507200) % 259200 ))
echo $day_param1
echo '${setValue(day_param='$day_param1')}'

file

2.2 添加swith模块

file

注:switch分支流转配置需要有后续任务才可以配置,后续任务配置好后再重新添加分支流转.

2.3 配置后续模块

file

2.4 定时配置

此时定时按照每天运行一次即可,满足隔3天的条件才进行真正的任务运行。

原文链接:https://blog.csdn.net/Brother_ning/article/details/136032323

本文由 白鲸开源科技 提供发布支持!

  • 4
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
DolphinScheduler 是一款开源的大数据分布式任务调度系统,支持在 Kubernetes(K8s)集群中部署。 在将 DolphinScheduler 部署到 K8s 集群之前,首先需要完成以下几个步骤: 1. 安装 K8s:在要部署 DolphinScheduler 的主机上,先安装 K8s,并确保集群正常运行。 2. 创建持久化存储:DolphinScheduler 需要使用持久化存储来保存任务和元数据。可以选择使用 K8s 支持的持久化存储卷(Persistent Volume)或其他存储解决方案,如 NFS、GlusterFS 等。 3. 编写 DolphinScheduler 的 K8s 配置文件:根据 K8s 的配置文件格式,编写 DolphinScheduler 的部署文件。包括 Deployment、Service、Ingress 等资源的定义,以及一些环境变量、挂载卷等的配置。 4. 创建 K8s 资源:使用 `kubectl` 命令创建 DolphinScheduler 相关的 K8s 资源。例如,创建 Deployment 来启动 DolphinScheduler 的后端服务,创建 Service 来暴露服务,创建 Ingress 来实现访问入口等。 5. 等待部署完成:等待 K8s 自动部署 DolphinScheduler 的各个组件,包括调度器、执行器、元数据库等。可以使用 `kubectl get pods` 命令来查看部署状态。 6. 配置 DolphinScheduler:一旦 DolphinScheduler 完成部署,可以通过访问 Ingress 或 Service 的地址来访问 DolphinScheduler 的 Web 页面。进入页面后,需要进行一些必要的配置,如数据库连接、调度器配置、任务的创建等。 总结起来,DolphinScheduler 在 K8s 上的部署过程包括安装 K8s、创建持久化存储、编写 K8s 配置文件、创建 K8s 资源,并等待部署完成。通过这样的过程,我们可以在 K8s 的弹性和可伸缩性上获得优势,并能够更好地管理和调度系统中的任务。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

DolphinScheduler社区

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值