本文详细解析了Flink中ExecutionGraph的生成过程，从StreamGraph、JobGraph到ExecutionGraph的转化，深入介绍了JobVertex、ExecutionJobVertex、ExecutionVertex等关键概念，以及ExecutionGraph在JobManager调度中的核心地位。
1.视界
2. 概述
本文在 2022年1月16日，更新了1.13版本的源码解析：
ExecutionGraph：JobManager 根据 JobGraph 生成ExecutionGraph。ExecutionGraph是JobGraph的并行化版本，是调度层最核心的数据结构。
2.1 名词解释
- StreamGraph：根据用户通过 Stream API 编写的代码生成的最初的图。
- StreamNode：用来代表 operator 的类，并具有所有相关的属性，如并发度、入边和出边等。
- StreamEdge：表示连接两个StreamNode的边。
- JobGraph：StreamGraph经过优化后生成了 JobGraph，提交给 JobManager 的数据结构。
- JobVertex：经过优化后符合条件的多个StreamNode可能会chain在一起生成一个JobVertex，即一个* * JobVertex包含一个或多个operator，JobVertex的输入是JobEdgeÿ
订阅专栏 解锁全文
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
