dolphinscheduler 任务一直运行，结束不了，从日志上看任务实例为空

最新推荐文章于 2024-09-10 10:21:47 发布
最新推荐文章于 2024-09-10 10:21:47 发布
阅读量6.5k 收藏 2
点赞数 4
分类专栏： dolphinscheduler ds 海豚调度 文章标签： java 定时任务
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_38349554/article/details/118333551
版权

这个 [bug](https://github.com/apache/dolphinscheduler/issues/1477) 描述了问题的详情。这个问题在 1.2.1 版本已经被修复了。 对于 1.2.1 以下的版本，这种情况的一些提示：

1，清空 zk 下这个路径的任务：/dolphinscheduler/task_queue
2，修改任务状态为失败（int 值 6）
3，运行工作流来从失败中恢复
零零淇
关注
专栏目录
DolphinScheduler【部署 01】分布式可视化工作流任务调度工具DolphinScheduler部署使用实例分享（一篇入门学会使用DolphinScheduler）
2401_84264096的博客
04-26 650
dolphinscheduler-master master模块，提供工作流管理和编排服务。dolphinscheduler-worker worker模块，提供任务执行管理服务。dolphinscheduler-alert 告警模块，提供 AlertServer 服务。dolphinscheduler-api web应用模块，提供 ApiServer 服务。dolphinscheduler-common 通用的常量枚举、工具类、数据结构或者基类。
关于dolphinscheduler运维过程遇到的问题：任务实例host为空
weixin_47966379的博客
09-05 2189
突然灵光一现，发现有开启防火墙这个步骤，于是对比了两台机器的防火墙情况，果真，正常运行的机器防火墙是关闭状态。3、dolphinscheduler调度在pg安装后平稳工作，但是全部作业在设置防火墙的那天起，变成了单一节点运行，由于资源抢占出现IO、GC等报错，重启作业以后成功，作业失败率增加导致分析师怒怼。点击到测试作业中查看日志时，页面空白，且弹出：（任务实例host为空）的提示词，后台根据日志数据库的内容，发现测试实例运行对应的host节点内容为空，遂费尽心思多方查找两个机器的差异。
Dolphinscheduler调度生成工作流实例未生成任务实例解决历程 one result (or null) to be returned by selectOne(),but found: 2
m0_37759590的博客
08-23 575
Dolphinscheduler调度生成工作流实例未生成任务实例解决历程 one result (or null) to be returned by selectOne(),but found: 2
DolphinScheduler应用实战笔记
最新发布
qq_40623672的博客
09-10 1134
DolphinScheduler（后文简称DS）在项目中的应用实战笔记，包含DS执行SQL或存储过程、DS调用DataX同步数据、DS调用HTTP接口
dolphinscheduler实例状态一直处于正在执行，状态不结束，实际上已经执行成功
weixin_44878780的博客
10-16 6652
dolphinscheduler实例状态一直处于正在执行，不结束 #dolphinscheduler的任务实例状态一直显示为正在执行，不结束 任务实例里一直显示为提交成功 背景：有三台节点: 第一台为marts、work 第二台为work 第三台为work 因为有特殊原因将2、3台节点的work停止掉了 造成的原因是：当执行hive、shell时候：状态可以显示成功或失败 但是执行sqoop 从mysql导数据到hive的时候状态一直显示为正在执行，实际上sqoop已经执行成功了,数据已经有了，sqoop
开源调度框架dolphinscheduler，2台机器上运行的任务无法立即停止，另外1台机器运行的任务可以立即停止
01-07
dolphinscheduler分布式部署，有3个worker节点，3个master节点 操作：分别停止215、216、217运行的工作流实例 如图： 点击停止按钮 3. 现象：215、216机器上的任务一直运行中，217机器上的任务kill状态 如图 4. 问题定位：打印3台机器的worker进程dump信息，发现215、216机器上，处理停止任务的线程发生了 一直 waiting 状态，找到 5. 解决方案：去掉processUtils.killYarnJob逻辑（hive、spark客户端执行，只需kill 本地进程，yarn任务会自动取消） 作者：weixin_4
dolphinscheduler有任务一直在运行（问题）目前对数据库解决
qq_43688472的博客
11-22 1150
其实对于dolphinscheduler的性能是下降的，比如页面会出现打不开，卡顿现象。这么多的任务没有结束，会涉及很多问题的，系统的数据盘会不断入职日志，数据量很大，目前是通过数据库更改任务状态解决的。11 - 等待依赖项完成。
Apache Dolphinscheduler - 执行工作流却没有创建任务实例分析
陆氪和他的那些代码
03-25 1510
Apache Dolphinscheduler - 执行工作流却没有创建任务实例分析
Apache DolphinScheduler 3.0 正式版重磅发布
数据之路
08-12 700
点亮 ⭐️ Star · 照亮开源之路**GitHub:**https://github.com/apache/dolphinscheduler版本发布2022/8/102022 年 8 月 10 日，Apache DolphinScheduler 在经过 3.0.0 alpha、3.0.0-beta-1、3.0.0-beta-2 不断验证之后，终于迎来了社区期盼已久的第三个大版本！3.0.0 正式版本发生了自发版以来的最大幅度变动，新增了众多全新功能和特性，旨在为用户带来全新的体验和更多价值。...
DolphinScheduler.docx
05-15
4. **优先级**：DolphinScheduler支持流程实例和任务实例的优先级设定，若未设置，则按照先进先出的原则执行。 5. **邮件告警**：系统能够发送SQL任务查询结果、流程实例运行结果以及容错告警的邮件通知，确保及时...
dolphinscheduler使用与测试文档
rocky_24的博客
04-28 853
DS 使用与测试
Dolphinscheduler任务失败-钉钉监控报警
S1124654的博客
02-16 1071
Dolphinscheduler任务失败-钉钉监控报警
[DolphinScheduler]工作流实例卡在正在停止&任务实例卡在正在运行
Justice
04-28 1507
海豚调度 DolphinScheduler工作流实例状态卡在正在停止 任务实例卡在正在运行
dolphinscheduler 1.2.1 运行datax任务，重复同步数据库问题排查记录
10-14 2649
稳定跑了一年的调度系统，突然包含datax节点的工作流集体报错，报错原因都是主键冲突，点进去查看，发现报错的节点大部分实际上是成功状态，但是状态为失败，而真正失败的节点报的都是主键冲突错。
DolphinScheduler
Leeyehong_self的专栏
07-15 4024
大数据调度工具
Apache DolphinScheduler 使用常见问题总结(持续更新中)
热门推荐
samz5906的专栏
05-29 4万+
DolphinScheduler 使用常见问题总结开发环境常见问题API启动端口是8080不是12345找不到mysql驱动 开发环境常见问题 API启动端口是8080不是12345 在初始化环境中api默认配置12345， 解决办法 编辑运行配置，增加如下配置 -Dserver-api-server -Dspring.profiles.active=api 找不到mysql驱动 由于DolphinScheduler 默认使用的postgresql,默认没有引入mysql驱动依赖。需要手动修改pom。
2021-12-13---2021SC@SDUSC---DolphinScheduler（12）
qq_56410453的博客
12-27 194
2021-12-13 2021SC@SDUSC 2021-12-13-DolphinScheduler（12） worker的故障转移 /** * failover worker tasks * * 1. kill yarn job if there are yarn jobs in tasks. * 2. change task state from running to need failover. * 3. failover all tasks when workerHost is null
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值