在多服务中,经常会碰到定时调度会重复执行,避免定时调度重复执行,有好几种方案,Elastic-Job,XXL-JOB
Quartz:Java事实上的定时任务标准。但Quartz关注点在于定时任务而非数据,并无一套根据数据处理而定制化的流程。虽然Quartz可以基于数据库实现作业的高可用,但缺少分布式并行调度的功能
TBSchedule:阿里早期开源的分布式任务调度系统。代码略陈旧,使用timer而非线程池执行任务调度。众所周知,timer在处理异常状况时是有缺陷的。而且TBSchedule作业类型较为单一,只能是获取/处理数据一种模式。还有就是文档缺失比较严重
elastic-job:当当开发的弹性分布式任务调度系统,功能丰富强大,采用zookeeper实现分布式协调,实现任务高可用以及分片,目前是版本2.15,并且可以支持云开发
Saturn:是唯品会自主研发的分布式的定时任务的调度平台,基于当当的elastic-job 版本1开发,并且可以很好的部署到docker容器上。
xxl-job: 是大众点评员工徐雪里于2015年发布的分布式任务调度平台,是一个轻量级分布式任务调度框架,其核心设计目标是开发迅速、学习简单、轻量级、易扩展。
本文使用shedlock 进行分布式定时调度处理
一、引入maven
<!-- 分布式定时任务锁 -->
<!-- https://mvnrepository.com/artifact/net.javacrumbs.shedlock/shedlock-spring -->
<dependency>
<groupId>net.javacrumbs.shedlock</groupId>
<artifactId>shedlock-spring</artifactId>
<version>4.0.4</version>
</dependency>
<!-- 使用redis做分布式任务 -->
<dependency>
<groupId>net.javacrumbs.shedlock</groupId>
<artifactId>shedlock-provider-redis-spring</artifactId>
<version>2.5.0</version>
</dependency>
二、配置启用定时调度 @EnableScheduling
@SpringBootApplication
@Slf4j
@EnableScheduling
public class AppsApplication {
public static void main(String[] args) {
SpringApplication.run(AppsApplication .class, args);
log.info("========================服务启动完成========================");
}
}
三、配置 shedlock 和 redis
import net.javacrumbs.shedlock.core.LockProvider;
import net.javacrumbs.shedlock.provider.redis.spring.RedisLockProvider;
import net.javacrumbs.shedlock.spring.annotation.EnableSchedulerLock;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import org.springframework.data.redis.core.RedisTemplate;
/**
* 分布式定时调度配置
* <p>
* SchedulerLock 注解一共支持五个参数,分别是
* name 用来标注一个定时服务的名字,被用于写入数据库作为区分不同服务的标识,如果有多个同名定时任务则同一时间点只有一个执行成功
* lockAtMostFor 成功执行任务的节点所能拥有独占锁的最长时间,单位是毫秒ms
* lockAtMostForString 成功执行任务的节点所能拥有的独占锁的最长时间的字符串表达,例如“PT14M”表示为14分钟
* lockAtLeastFor 成功执行任务的节点所能拥有独占所的最短时间,单位是毫秒ms
* lockAtLeastForString 成功执行任务的节点所能拥有的独占锁的最短时间的字符串表达,例如“PT14M”表示为14分钟
*/
@Configuration
@EnableSchedulerLock(defaultLockAtMostFor = "PT30M")
public class ShedLockConfig {
@Bean
public LockProvider lockProvider(RedisTemplate redisTemplate) {
return new RedisLockProvider(redisTemplate.getConnectionFactory());
}
}
四、配置定时调度,定时调度添加注解 @SchedulerLock(name = "synchronousDraftOrderSchedule"), 使用@SchedulerLock进行分布式调度处理
import lombok.extern.slf4j.Slf4j;
import net.javacrumbs.shedlock.spring.annotation.SchedulerLock;
import org.springframework.scheduling.annotation.Scheduled;
import org.springframework.stereotype.Component;
@Slf4j
@Component
public class SynchronousScheduler {
/**
* 每隔一小时执行
* [秒] [分] [小时] [日] [月] [周] [年]
*/
// @Scheduled(cron = "0 0 17 * * ?") 每天17点执行
@Scheduled(cron = "0 0 */1 * * ?")
@SchedulerLock(name = "synchronousSchedule")
public void SynchronousSchedule() {
log.info("Start run schedule to synchronous data");
}
}