项目地址:github.com/lemont-sr/m…
前言:
开源的分布式调度框架基本上分为两种:
一种为中心化调度,如xxl,将调度任务单独提炼出来,达到解耦的目的。
另一种是去中心化调度,如elastic-job。本文介绍的项目是后者类型。
使用背景
一个web项目多机部署,web项目中可以配置具体的任务,任务同一时刻只能有一台机器执行。
一种实现方式是定时任务固定时间检查数据库,定时更新任务(因为多台机器,web上对任务操作只会指向一台机器)。
本项目是使用zk来实现任务同步,定时任务不重复调度。
此外项目融入spring,使用起来和spring的schedule功能体验一样,方便快捷。
项目功能
该框架可以做什么
- 继承simplejob保证多机同时只有一台机器执行任务
- 继承shardingjob可以获取分片,多机协调完成任务
- 任务在一台机器上添加,可以选择同步到集群上,方便集群间任务启停同步
实现原理
依赖zookeeper,节点间通过zookeeper实现任务同步,任务不重复执行,任务分片,主从选举,主备切换。
mars-job通过zk保证任务的更新的顺序性,一致性,多机任务不重复执行,任务分片等功能 上述的任务同步通过mq可以实现,但增加了项目复杂度。