设计一个支持Spark和Ray作业类型的Scheduler调度系统的作业提交功能
文章目录
以下是一个支持Spark和Ray作业类型的Scheduler调度系统设计,包含核心功能模块和实现思路:
Scheduler调度系统 - 作业提交功能设计
1. 系统架构概览
+-------------------+ +-----------------+ +---------------+
| 用户提交接口 | --> | 作业解析器 | --> | 资源管理器 |
| (REST API/CLI) | | (Job Parser) | | (Resource Mgmt)
+-------------------+ +-----------------+ +---------------+
| |
| v
| +---------------+
| | 作业执行器 |
| | (Executor) |
| +---------------+
|
v
+--

订阅专栏 解锁全文
922

被折叠的 条评论
为什么被折叠?



