技术选型-Apache DolphinScheduler VS Xxl-Job_任务调度工具 xxl dolphin 2024 选型(2)

最新推荐文章于 2024-09-09 19:35:23 发布

2401_84181368

最新推荐文章于 2024-09-09 19:35:23 发布

阅读量1.1k

点赞数 28

分类专栏：程序员文章标签： apache

本文链接：https://blog.csdn.net/2401_84181368/article/details/138440171

版权

本文对比分析了Apache DolphinScheduler和Xxl-Job在任务调度领域的优缺点，探讨了2024年的技术选型策略。并强调了系统化学习资料的重要性，邀请读者加入技术交流圈子，共同进步。

摘要由CSDN通过智能技术生成

                    
   Apache DolphinScheduler
   Xxl-Job
  
   依赖
   PostgreSQL 8.2.15+ or mysql 5.6+，jdk 1.8+ ,ZooKeeper 3.4.6+，Hadoop 2.6+ or MinIO（选装， 如果需要用到资源上传功能，针对单机可以选择本地文件目录作为上传文件夹(此操作不需要部署Hadoop)；当然也可以选择上传到Hadoop or MinIO集群上）
   mysql 5.7+，jdk 1.7+ ，maven 3.0+
  
   单点故障
   去中心化的多Master和多Worker
   是，单一调度程序
  
   HA要求
   不需要（本身就支持HA）
   支持
  
   过载处理
   任务队列机制，单个机器上可调度的任务数量可以灵活配置，当任务过多时会缓存在任务队列中，不会造成机器卡死
   暂无
  
   DAG监控界面
   任务状态、任务类型、重试次数、任务运行机器、可视化变量等关键信息一目了然
   支持简单的子任务和任务依赖，不支持完整的DAG任务
  
   可视化流程定义
   是，所有流程定义操作都是可视化的，通过拖拽任务来绘制DAG,配置数据源及资源。同时对于第三方系统，提供api方式的操作。
   支持简单的指定子任务
  
   监控告警
   支持
   支持
  
   是否能暂停和恢复
   支持暂停&

	Apache DolphinScheduler	Xxl-Job
依赖	PostgreSQL 8.2.15+ or mysql 5.6+，jdk 1.8+ ,ZooKeeper 3.4.6+，Hadoop 2.6+ or MinIO（选装，如果需要用到资源上传功能，针对单机可以选择本地文件目录作为上传文件夹(此操作不需要部署Hadoop)；当然也可以选择上传到Hadoop or MinIO集群上）	mysql 5.7+，jdk 1.7+ ，maven 3.0+
单点故障	去中心化的多Master和多Worker	是，单一调度程序
HA要求	不需要（本身就支持HA）	支持
过载处理	任务队列机制，单个机器上可调度的任务数量可以灵活配置，当任务过多时会缓存在任务队列中，不会造成机器卡死	暂无
DAG监控界面	任务状态、任务类型、重试次数、任务运行机器、可视化变量等关键信息一目了然	支持简单的子任务和任务依赖，不支持完整的DAG任务
可视化流程定义	是，所有流程定义操作都是可视化的，通过拖拽任务来绘制DAG,配置数据源及资源。同时对于第三方系统，提供api方式的操作。	支持简单的指定子任务
监控告警	支持	支持
是否能暂停和恢复	支持暂停&