ACoder_Xc-CSDN博客

原创 Dolphinscheduler Worker 核心执行流程源码分析

WorkerManagerThread 在这里是个抽象类，实际上推送到队列的是他的子类 WorkerDelayTaskExecuteRunnable 类型的实例，该类实现了 Delayed 接口，实现了 getDelayed 和 compareTo 方法，且这里的队列是一个 DelayedQueue，从而使派发的 worker 节点的任务可以延迟执行。worker 节点注册了各类任务执行插件，根据 master 节点派发任务的具体类型选择具体的插件执行。上面是任务家族的各个核心成员。

2024-07-21 22:05:21 203

原创 Dolphinscheduler Master 核心执行流程源码分析

例如 shell、python 这类通用任务会选择默认任务处理器 CommonTaskProcessor，这类任务提交后 Master 无需其他操作，直接派发到 worker 执行，而 dependent 任务选择 DependentTaskProcessor，这类任务仅需要 Master 判断依赖的任务是否执行成功，而无需派发到 worker 节点执行。其中 workflowEventHandlerMap 在程序启动时初始化。任务处理器插件 TaskProcessor 实现方式。

2024-07-20 11:05:05 292

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人