ds项目管理

切换普通用户登录ds:

 

 

点击项目进入工作流及项目定义界面:

 

 

工作流定义:

点击创建工作流:

 

 

创建shell工作流:

 

 

 

配置后的节点:

 

类似的复制出三个节点:

 

配置依赖关系:

Node-C依赖于Node-A喝Node-B。

配置Node-C节点:

 

前置任务,用于配置节点间的依赖关系。

所谓依赖关系就是指某个任务依赖的任务执行完成后,才会执行它自己。

 工作流任务节点搭建完成。

保存工作流:

 

 

再次点击工作流即可进入编辑界面。

此时工作流实例和任务实例菜单下是没有数据的。

任务定义下面有数据;

 在这里可以清晰的看到任务的信息和版本迭代等。不仅可以在工作流定义可以编辑任务信息,在此处也可以方便的对任务进行编辑。 

默认情况下,定义的工作流是处理下线状态的,无法允许,只能进行编辑操作。

在运行之前需要将工作流上线,才能进行运行(只允许一次)和定时运行的操作。

 

对应的任务定义栏目:

 

此时两个实例菜单下面仍然没有数据。

点击工作流运行按钮:

 

提示成功。

 

点击工作流进去,可以看到每个任务节点的运行状态是已经成功了。

 

 

查看任务运行日志:

 

 定时运行:

点击定时:

 

 

 

 

 

此时定时状态为下线,需要点击定时管理按钮进入:

 

 

返回,每隔1分钟就会执行该工作流一次。

 

 

 

Apache DolphinScheduler是一个新一代分布式大数据工作流任务调度系统,致力于“解决大数据任务之间错综复杂的依赖关系,整个数据处理开箱即用”。它以 DAG(有向无环图) 的方式将任务连接起来,可实时监控任务的运行状态,同时支持重试、从指定节点恢复失败、暂停及 Kill任务等操作。目前已经有像IBM、腾讯、美团、360等400多家公司生产上使用。 调度系统现在市面上的调度系统那么多,比如老牌的Airflow, Oozie,Kettle,xxl-job ,Spring Batch等等, 为什么要选DolphinScheduler ? DolphinScheduler 的定位是大数据工作流调度。通过把大数据和工作流做了重点标注. 从而可以知道DolphinScheduler的定位是针对于大数据体系。DolphinScheduler 发展很快 很多公司调度都切换到了DolphinScheduler,掌握DolphinScheduler调度使用势在必行,抓住新技术机遇,为跳巢涨薪做好准备。 优秀的框架都是有大师级别的人写出来的,包含了很多设计思想和技术。DolphinScheduler也不例外,它是一个非常优秀的框架,用到很多技术和设计思想,本课程会带大家深入DolphinScheduler框架源码,包括设计的思想和技术都会讲解,DolphinScheduler源码很多,会按照模块进行讲解,学习完课程后,不仅可以熟悉DolphinScheduler使用,而且可以掌握很多优秀的设计思想和技术,给自己的技术带来很大提升,为跳巢涨薪做好准备。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

荒先生

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值