分布式单元化调度平台 unit-job

1、项目背景

  对市场上现有调度平台调研，无法满足的需求如下：

  1、现有市场上的调度平台，无法满足大型、复杂业务调度能力。

  2、批次任务管理混乱，任务设计不清晰

  3、并行任务支持不良好，无法详细记录任务执行情况

  4、无法满足批次、任务间的依赖关系创建

  5、无法实时获取到执行结果信息及异常堆栈信息

  6、无法满足多数据中心调度任务分配管理、切换

2、unit-job介绍

2.1 概述

    unit-job是一个分布式调度平台。 提供批次、任务可视化管理。支持批次任务定义、任务依赖配置、定时任务配置；业务参数定义、分片参数定义，支持多服务器并行批量执行；任务作业自动拆分管理、机器资源管理与任务匹配下发；更为详细的批次、任务、作业日志，执行器日志，批次执行结果收集日志，异常日志实时查看，异常告警。多数据中心配置、资源池管理、资源分设置等。

2.2 层次结构设计

2.3 调度执行设计 

2.4 配置态&运行态并行设计 

 

2.5 功能设计

 2.5 层次功能设计

 2.5 项目地址

    GITEE地址： unit-job-ce: unit-job是一个分布式调度平台，提供批次、任务可视化管理。支持批次任务定义、任务依赖配置、定时任务配置；业务参数定义、分片参数定义，支持多服务器并行批量执行；任务作业自动拆分管理、机器资源管理与任务匹配下发；更为详细的批次、任务、作业日志，执行器日志，批次执行结果收集日志，异常日志实时查看，异常告警。多数据中心配置、资源池管理、资源分设置等