分布式调度问题

分布式调度问题

调度—>定时任务,分布式调度—>在分布式集群环境下定时任务这件事Elastic-job(当当⽹开源的分布式调度框架)

定时任务的场景

定时任务形式:每隔⼀定时间/特定某⼀时刻执⾏
例如

  • 订单审核、出库
  • 订单超时⾃动取消、⽀付退款
  • 礼券同步、⽣成、发放作业
  • 物流信息推送、抓取作业、退换货处理作业
  • 数据积压监控、⽇志监控、服务可⽤性探测作业
  • 定时备份数据
  • ⾦融系统每天的定时结算
  • 数据归档、清理作业
  • 报表、离线数据分析作业

什么是分布式调度

什么是分布式任务调度?有两层含义
1)运⾏在分布式集群环境下的调度任务(同⼀个定时任务程序部署多份,只应该有⼀个定时任务在执⾏)
2)分布式调度—>定时任务的分布式—>定时任务的拆分(即为把⼀个⼤的作业任务拆分为多个⼩的作业任务,同时执⾏)

在这里插入图片描述

定时任务与消息队列的区别

共同点

  • 异步处理 ⽐如注册、下单事件
  • 应⽤解耦 不管定时任务作业还是MQ都可以作为两个应⽤之间的⻮轮实现应⽤解耦,这个⻮轮可以中转
    数据,当然单体服务不需要考虑这些,服务拆分的时候往往都会考虑
  • 流量削峰 双⼗⼀的时候,任务作业和MQ都可以⽤来扛流量,后端系统根据服务能⼒定时处理订单或者从MQ抓取订单抓取到⼀个订单到来事件的话触发处理,对于前端⽤户来说看到的结果是已经下单成功了,下单是不受任何影响

本质不同
定时任务作业是时间驱动,⽽MQ是事件驱动;时间驱动是不可代替的,⽐如⾦融系统每⽇的利息结算,不是说利息来⼀条(利息到来事件)就算⼀下,⽽往往是通过定时任务批量计算;所以,定时任务作业更倾向于批处理,MQ倾向于逐条处理;

定时任务的实现方式

定时任务的实现⽅式有多种。早期没有定时任务框架的时候,我们会使⽤JDK中的Timer机制和多线程机制(Runnable+线程休眠)来实现定时或者间隔⼀段时间执⾏某⼀段程序;后来有了定时任务框架,⽐如⼤名鼎鼎的Quartz任务调度框架,使⽤时间表达式(包括:秒、分、时、⽇、周、年)配置某⼀个任务什么时间去执⾏:

任务调度框架Quartz回顾示意(我们课程主要内容不是Quartz)
引⼊jar

<!--任务调度框架quartz-->
<!-- https://mvnrepository.com/artifact/org.quartz-scheduler/quartz --
>
<dependency>
 <groupId>org.quartz-scheduler</groupId>
 <artifactId>quartz</artifactId>
 <version>2.3.2</version>
</dependency>

定时任务作业主调度程序

package quartz;
import org.quartz.*;
import org.quartz.impl.StdSchedulerFactory;
public class QuartzMain {
 // 创建作业任务调度器(类似于公交调度站)
 public static Scheduler createScheduler() throws
SchedulerException {
 SchedulerFactory schedulerFactory = new StdSchedulerFactory();
 Scheduler scheduler = schedulerFactory.getScheduler();
 return scheduler;
 }
 // 创建⼀个作业任务(类似于⼀辆公交⻋)
 public static JobDetail createJob() {
 JobBuilder jobBuilder = JobBuilder.newJob(DemoJob.class);
 jobBuilder.withIdentity("jobName","myJob");
 JobDetail jobDetail = jobBuilder.build();
 return jobDetail;
 }
 /**
 * 创建作业任务时间触发器(类似于公交⻋出⻋时间表)
 * cron表达式由七个位置组成,空格分隔
 * 1、Seconds(秒) 0~59
 * 2、Minutes(分) 0~59
 * 3、Hours(⼩时) 0~23
 * 4、Day of Month(天)1~31,注意有的⽉份不⾜31天
 * 5、Month(⽉) 0~11,或者
JAN,FEB,MAR,APR,MAY,JUN,JUL,AUG,SEP,OCT,NOV,DEC
 * 6、Day of Week(周) 1~7,1=SUN或者 SUN,MON,TUE,WEB,THU,FRI,SAT
 * * 7、Year(年)1970~2099 可选项
 *示例:
 * 0 0 11 * * ? 每天的11点触发执⾏⼀次
 * 0 30 10 1 * ? 每⽉1号上午10点半触发执⾏⼀次
 */
 public static Trigger createTrigger() {
 // 创建时间触发器,按⽇历调度
 CronTrigger trigger = TriggerBuilder.newTrigger()
 .withIdentity("triggerName","myTrigger")
 .startNow()
 .withSchedule(CronScheduleBuilder.cronSchedule("0/2 *
* * * ?"))
 .build();
 // 创建触发器,按简单间隔调度
 /*SimpleTrigger trigger1 = TriggerBuilder.newTrigger()
 .withIdentity("triggerName","myTrigger")
 .startNow()
 .withSchedule(SimpleScheduleBuilder
 .simpleSchedule()
.withIntervalInSeconds(3)
.repeatForever())
 .build();*/
 return trigger;
 }
 // 定时任务作业主调度程序
 public static void main(String[] args) throws SchedulerException {
 // 创建⼀个作业任务调度器(类似于公交调度站)
 Scheduler scheduler = QuartzMain.createScheduler();
 // 创建⼀个作业任务(类似于⼀辆公交⻋)
 JobDetail job = QuartzMain.createJob();
 // 创建⼀个作业任务时间触发器(类似于公交⻋出⻋时间表)
 Trigger trigger = QuartzMain.createTrigger();
 // 使⽤调度器按照时间触发器执⾏这个作业任务
 scheduler.scheduleJob(job,trigger);
 scheduler.start();
 }
}

定义⼀个job,需实现Job接⼝

package quartz;
import org.quartz.Job;
import org.quartz.JobExecutionContext;
import org.quartz.JobExecutionException;
public class DemoJob implements Job {
 public void execute(JobExecutionContext jobExecutionContext)
throws JobExecutionException {
 System.out.println("我是⼀个定时任务逻辑");
 }
}

以上,是回顾⼀下任务调度框架Quartz的⼤致⽤法,那么在分布式架构环境中使⽤Quartz已经不能更好
的满⾜我们需求,我们可以使⽤专业的分布式调度框架,这⾥我们推荐使⽤Elastic-job。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值