【第五期】Apache DolphinScheduler 每周 FAQ 集锦

点击蓝字 关注我们

摘要

为了让 Apache DolphinScheduler 的广大用户和爱好者对于此项目的疑问得到及时快速的解答，社区特发起此次【每周 FAQ】栏目，希望可以解决大家的实际问题。

关于本栏目的要点：

1. 本栏目每周将通过腾讯文档（每周更新）从社区微信群收集 10-30 个问答，并在每周五整理具有典型代表意义的问答后发布，供大家参考。

2. 所有人均可登录文档并提出问题，每人限 2 个提问，提问范围包括：

   1. 关于 Apache DolphinScheduler 的使用问题和技术性问题；

   2. 在实际应用中遇到的瓶颈问题；

   3. 参与社区贡献遇到的困难；

   4. 关于社区发展的疑问。

3. 资源有限，请勿提问项目无关问题。

4. 【每周FAQ】是一个社区互助的项目，发起宗旨是鼓励社区成员相互帮助，因此，欢迎大家积极踊跃志愿回答提出的疑问，在腾讯文档中写下答案即可。（高手们都别“潜水”了，出来露一手😜😎）

5. 在社群里已经提问的问题，请勿在文档中重复提问，节约资源。

6. 本栏目招募志愿者，有兴趣参与的小伙伴请加微信小助手 Leonard ds 报名。

4月29日-5月5日

问

工作流实例点停止,有时候停不下,一直处于准备停止状态，是什么原因？    

答

可能在处理别的事件，如果一直不成功，稳定复现建议创建 issue。

问

日志界面默认换行展示不清晰，建议增加横向滚动条。

答

Dev 版本的日志已经相对清晰了，感兴趣可以尝试下dev版本的代码。    

问

任务移动功能无法使用,无法从一个工作流移动至其它工作流，是怎么回事？    

答

目前没有任务移动功能。    

问

DolphinScheduler 3.x哪个版本最稳定？  

答

最新版3.1.5就可以。    

问

DolphinScheduler能监控Flink任务吗？我测试的yarn-application 模式，只要海豚执行完.sh脚本后，就提示任务成功了，但此时去yarn上看的话，任务还在执行。      

答

DolphinScheduler只是负责服务的拉起，它的表现和你在命令行提交是一个道理，如果你命令行要通过 flink run-application list 方式列出内容来，那你也需要在 ds 中的shell 中做类似操作。

问

DolphinScheduler对接华为fi mrs时，fi里有kerberos认证，用了3.6.3版本的zk，就和DolphinScheduler不兼容了，这是怎么回事？    

答

建议升级存在的zk，或者通过 https://github.com/apache/dolphinscheduler/

blob/dev/CONTRIBUTING.md 这个方式指定 zk 版本打包。    

问

现在支持Flink取消任务的时候添加保存点吗？    

答

不支持。

问

是否可以将HUE的UI界面功能集成进DolphinScheduler？    

答

目前不考虑，如果内部系统的话可以自行二开。    

问

DolphinScheduler是否可以结合Jupyter将脚本编写和工作流解耦？    

答

可以使用 Jupyter 任务实施，看看是不是你要的功能。    

问

运行的时候，显示的路径和IP都是错误的，不存在的，提交时间也是错的，哪里有问题？    

答

路径是临时的，运行完了会删除，IP应该不会有误。    

问

DS集群有办法把项目里面的所有SHEEL脚本可以一次性把任务全部导出来吗？    

答

直接去数据库 load 试下。    

问

调度任务一直处于派发状态，无法执行，是什么原因？    

答

看看是不是worker挂了。或者可能是worker cpu 或者内存满了（or达到配置的保留内存数量）。

问

DolphinScheduler 3.1.x版本只支持sql任务类型的告警，其他任务类型的告警怎么触发？没有找到关联的地方，代码只支持sql发送告警。    

答

运行工作流、配置定时的时候可以配置对应的告警组。    

问

DolphinScheduler 3.1.5，建立Mysql数据源，无法保存密码。一开始测试连接是没问题的，再次执行就连接不上了。在元数据中，是可以查看到密码信息的。    

答

看看是否操作的问题，如果元数据库密码是正确的，那就可以链接，另外看看可选参数是否正确，有部分用户修改了 mysql ssl 认证也可能导致旧链接失效。    

问

DolphinScheduler是否可以通过修改配置完全不依赖hadoop呢？    

答

DolphinScheduler默认就是不依赖 Hadoop，除非资源中心使用了 hdfs，如果不想依赖hadoop资源中心可以配置 s3，或者如果不需要资源中心，可以不开启 。

问

DolphinScheduler的数据库用MySQL 8.0可以吗？    

答

可以。

< 🐬🐬 >

往期回顾

☞【每周 FAQ】第二期 | 回答你关于 Apache DolphinScheduler 的疑问

☞【每周 FAQ】第一期 | 回答你关于 Apache DolphinScheduler 的疑问

☞【第三期】Apache DolphinScheduler 每周 FAQ 集锦

☞【第四期】Apache DolphinScheduler 每周 FAQ 集锦

参与贡献

随着国内开源的迅猛崛起，Apache DolphinScheduler 社区迎来蓬勃发展，为了做更好用、易用的调度，真诚欢迎热爱开源的伙伴加入到开源社区中来，为中国开源崛起献上一份自己的力量，让本土开源走向全球。

参与 DolphinScheduler 社区有非常多的参与贡献的方式，包括：

贡献第一个PR(文档、代码) 我们也希望是简单的，第一个PR用于熟悉提交的流程和社区协作以及感受社区的友好度。

社区汇总了以下适合新手的问题列表：https://github.com/apache/dolphinscheduler/issues/5689

非新手问题列表：https://github.com/apache/dolphinscheduler/issues?q=is%3Aopen+is%3Aissue+label%3A%22volunteer+wanted%22

如何参与贡献链接：https://dolphinscheduler.apache.org/zh-cn/community/development/contribute.html

来吧，DolphinScheduler开源社区需要您的参与，为中国开源崛起添砖加瓦吧，哪怕只是小小的一块瓦，汇聚起来的力量也是巨大的。

参与开源可以近距离与各路高手切磋，迅速提升自己的技能，如果您想参与贡献，我们有个贡献者种子孵化群，可以添加社区小助手微信(Leonard-ds) ，手把手教会您( 贡献者不分水平高低，有问必答，关键是有一颗愿意贡献的心 )。

添加社区小助手微信(Leonard-ds) 

添加小助手微信时请说明想参与贡献。

来吧，开源社区非常期待您的参与。

点击阅读原文，点亮Star支持我们哟