dolphinscheduler简单任务定义及复杂的跨节点传参

最新推荐文章于 2024-09-22 20:59:23 发布

xuhss_com

最新推荐文章于 2024-09-22 20:59:23 发布

阅读量1.6k

点赞数

分类专栏：计算机文章标签： flask python 后端计算机

本文链接：https://blog.csdn.net/xuhss_com/article/details/125692180

版权

本文介绍了Dolphinscheduler的简单任务创建、参数传递，包括单节点任务和复杂的跨节点传参，详细解析了任务定义、工作流结构、参数设置以及常见问题与解决方案。

摘要由CSDN通过智能技术生成

🚀 优质资源分享 🚀

学习路线指引（点击解锁）	知识定位	人群定位
🧡 Python实战微信订餐小程序 🧡	进阶级	本课程是python flask+微信小程序的完美结合，从项目搭建到腾讯云部署上线，打造一个全栈订餐系统。
💛Python量化交易实战💛	入门级	手把手带你打造一个易扩展、更安全、效率更高的量化交易系统

dolphinscheduler简单任务定义及跨节点传参

转载请注明出处 https://blog.csdn.net/funnyzpc/p/16395094.html

写在前面

dolphinscheduler是一款非常不错的调度工具，本文我就简称ds啦，可单机可集群可容器，可调度sql、存储过程、http、大数据，也可使用shell、python、java、flink等语言及工具，功能强大类型丰富，适合各类调度型任务，社区及项目也十分活跃，现在github中已有8.2k的star👍
所以，本篇博文开始会逐步讲一些ds相关的东西，也期待各位同行能接触到此并能实际解决一些生产上的问题～😁

一.准备工作



|  | 阅读本博文前建议您先阅读下官方的文档[https://dolphinscheduler.apache.org/zh-cn/docs/latest/user\_doc/guide/parameter/context.html)(https://dolphinscheduler.apache.org/zh-cn/docs/latest/user\_doc/guide/parameter/context.html)（虽然也会碰到一些坑😂） |
|  | 这里，先准备下sql表资源，以下为`postgresql`的`sql`脚本: |

（表结构）



|  |  |
|  | CREATE TABLE dolphinscheduler.tmp ( |
|  |  id int4 NOT NULL, |
|  |  "name" varchar(50) NULL, |
|  |  "label" varchar(50) NULL, |
|  |  update\_time timestamp NULL, |
|  |  score int4 NULL, |
|  | CONSTRAINT tmp\_pkey PRIMARY KEY (id) |
|  | ); |