【第六期】Apache DolphinScheduler 每周 FAQ 集锦

点击蓝字 关注我们

摘要

为了让 Apache DolphinScheduler 的广大用户和爱好者对于此项目的疑问得到及时快速的解答，社区特发起此次【每周 FAQ】栏目，希望可以解决大家的实际问题。

关于本栏目的要点：

1. 本栏目每周将通过腾讯文档（每周更新）从社区微信群收集 10-30 个问答，并在每周五整理具有典型代表意义的问答后发布，供大家参考。

2. 所有人均可登录文档并提出问题，每人限 2 个提问，提问范围包括：

   1. 关于 Apache DolphinScheduler 的使用问题和技术性问题；

   2. 在实际应用中遇到的瓶颈问题；

   3. 参与社区贡献遇到的困难；

   4. 关于社区发展的疑问。

3. 资源有限，请勿提问项目无关问题。

4. 【每周FAQ】是一个社区互助的项目，发起宗旨是鼓励社区成员相互帮助，因此，欢迎大家积极踊跃志愿回答提出的疑问，在腾讯文档中写下答案即可。（高手们都别“潜水”了，出来露一手😜😎）

5. 在社群里已经提问的问题，请勿在文档中重复提问，节约资源。

6. 本栏目招募志愿者，有兴趣参与的小伙伴请加微信小助手 Leonard ds 报名。

5月6日-5月12日

问

哪个版本支持跨用户依赖任务？就是a用户任务依赖b和d用户创建的多个任务。    

答

3.1.5版本支持，参考https://dolphinscheduler.apache.org/zh-cn/docs/3.1.5/guide/task/dependent。    

问

DolphinScheduler生产环境用什么版本？  

答

最新 3.1.5 版本欢迎你，如果你还在调研没有正式使用的话，一周后的 3.1.6 也是不错的选择。  

问

3.0.0 版本上传jar包超大失败如何解决？  

答

需要前端增加超时 https://github.com/apache/dolphinscheduler

/issues/14027。  

问

DolphinScheduler目前是否支持工作流的血缘分析？    

答

看看项目管理 - 工作流关系是否是想要的功能。   

问

DolphinScheduler 3.1.5版本，Spark节点，Spark-sql任务可以执行资源文件中的SQL吗？    

答

目前不支持。    

问

子流程传递参数这个功能有人在做了么？  

答

有一个开源之夏的课题，欢迎认领：Apache DolphinScheduler 开源之夏学生项目申请开启，6 大课题等你来拿万元奖金！

问

不小心把zk删了，怎么办？    

答

重新让海豚注册一遍就OK了。    

问

有不少任务，依赖检查失败了，但是整体状态还是running，似乎后面的子节点一直在等待前面的调度成功了再运行。   

答

2.0.5之后的版本修复了这个问题。    

问

DolphinScheduler 1升级到3.1.5后，授权信息需要重新再执行一遍。    

答

应该是有部分不兼容的更新了。    

问

DolphinScheduler 3.1.5版本没有了loggerserver，调度执行的py文件内部执行异常日志没有打印到页面，原来的1版本可以打印py执行脚本日志信息。    

答

logserver 集成到wroker和master了，可以看对应的日志。    

问

DolphinScheduler 3.1.5版本工作流定时调度管理上线后，不会自动排序展示到第一个，不方便开发。    

答

是按照工作流更新时间展示的。    

问

DolphinScheduler 3.1.3版本新建sql任务，手动执行该任务，工作流实例一直运行状态，该任务实例一直处于派发状态（该问题怎样排错？）    

答

看看master 的日志，会有具体的报错信息的。   

问

3.1.6版本大概什么时候发版？    

答

本周在走发版流程。    

问

DolphinScheduler流里面的节点可以复制到其他流里面吗？   

答

不支持任务复制，但是可以复制工作流后删除不必要的任务。    

问

DolphinScheduler集群在安装时，只在本机创建了不存在的文件夹，另外两台机器上没有自动创建安装文件夹，这个问题什么原因？   

答

1. 查看SSH免密是否可以使用

2. 查看文件夹权限或者路径是否正确。    

问

海豚的项目可以复制吗？同一个集群，不同的项目。    

答

可以导出，全选进行导出即可。    

问

为什么worker跑着跑着就挂了？    

答

看 worker 运行日志，正常不会挂。   

问

3.1.5版本中支持stream任务么？    

答

支持，任务定义-实时任务。    

问

目前3.1.5这个版本里面能否配置任务与任务之间的弱依赖关系?    

答

看看 subprocess 或者 dependent 这两个任务是否满足你的需求。      

问

DolphinScheduler任务处于派发状态，怎么样才能继续执行？    

答

重启master。   

问

DolphinScheduler能集成到TiDB数据库，实现对TiDB数据库的调度吗？ 

答

元数据库是支持 TiDB 的，如果想说数据源的话，可以用 MySQL 协议。  

< 🐬🐬 >

往期回顾

☞【每周 FAQ】第二期 | 回答你关于 Apache DolphinScheduler 的疑问

☞【每周 FAQ】第一期 | 回答你关于 Apache DolphinScheduler 的疑问

☞【第三期】Apache DolphinScheduler 每周 FAQ 集锦

☞【第四期】Apache DolphinScheduler 每周 FAQ 集锦

☞【第五期】Apache DolphinScheduler 每周 FAQ 集锦

< 🐬🐬 >

精彩活动推荐

汽车行业走在了数字化革命浪潮的前列。大数据和 AI 技术的日益成熟，让汽车行业面对着动辄上百万的日活数据，二调度系统助力汽车数字化平台数据调度重塑着未来汽车的面貌，其重要作用不言而喻。

Apache DolphinScheduler 作为国内外多家知名车企数据平台的核心调度系统，它是如何帮助车企迎接数字化时代新挑战的？如何辅助重塑未来汽车的新面貌？欢迎大家关注即将到来的 Apache DolphinScheduler 汽车行业最佳应用实践专场直播！

直播时间：2023 年 5 月 23 日 19:00-21:00

预约方式：点击预约，视频号直播不见不散！

参与贡献

随着国内开源的迅猛崛起，Apache DolphinScheduler 社区迎来蓬勃发展，为了做更好用、易用的调度，真诚欢迎热爱开源的伙伴加入到开源社区中来，为中国开源崛起献上一份自己的力量，让本土开源走向全球。

参与 DolphinScheduler 社区有非常多的参与贡献的方式，包括：

贡献第一个PR(文档、代码) 我们也希望是简单的，第一个PR用于熟悉提交的流程和社区协作以及感受社区的友好度。

社区汇总了以下适合新手的问题列表：https://github.com/apache/dolphinscheduler/issues/5689

非新手问题列表：https://github.com/apache/dolphinscheduler/issues?q=is%3Aopen+is%3Aissue+label%3A%22volunteer+wanted%22

如何参与贡献链接：https://dolphinscheduler.apache.org/zh-cn/community/development/contribute.html

来吧，DolphinScheduler开源社区需要您的参与，为中国开源崛起添砖加瓦吧，哪怕只是小小的一块瓦，汇聚起来的力量也是巨大的。

参与开源可以近距离与各路高手切磋，迅速提升自己的技能，如果您想参与贡献，我们有个贡献者种子孵化群，可以添加社区小助手微信(Leonard-ds) ，手把手教会您( 贡献者不分水平高低，有问必答，关键是有一颗愿意贡献的心 )。

添加社区小助手微信(Leonard-ds) 

添加小助手微信时请说明想参与贡献。

来吧，开源社区非常期待您的参与。

点击阅读原文，点亮Star支持我们哟