job 每月5号_Linkis架构解析系列Job执行流程源码解析

Linlis 0.X版本架构解析系列

--Job执行流程架构源码解析

作业执行服务在Linkis 中承担了计算的作用，Job作为作业执行服务中的最小单元，为Job定义了通用的接口和执行优化，来提升Job的通用性和能力。从Job封装到运行，涉及到Linkis中的多个服务，本文将介绍linkis 0.X版本中的Job从提交到执行的整个过程。

 1. Job执行在Linkis处在什么位置

Job执行在Linkis的架构中处于统一作业执行服务(Unified Job Execution Services)中，如下图所示：

从图中可以看到UJES在Linkis中占据核心部分，一个Job从封装、运行、结果推送的执行流程从前端入口，到底层计算引擎，涉及到统一作业服务、资源管理服务、统一存储服务、统一上下文服务涉及到Linkis的多个服务。

2. Job处理流程

Linkis UJES(Unified Job Execution Services) 作为Job的执行服务，对外提供了REST/WebSocket的通用接口，用于接收上层系统提交的各种访问请求，并提供给底层计算存储引擎执行。支持Job的高并发、高可用、多租户、资源隔离，上下文统一。Job的执行处理流程如下图： 从图我们可以了解到一个Job的执行可以分为15个步骤，可以把这15个步骤规划到三个大步骤中：Job封装，Job执行，Job信息推送；

2.1 Job封装

1. Clinet(如前端)发起请求执行Job，Job请求信息如下：

2. GateWay收到Job后将Job通过executeApplicati