经验整理-36-分布式job-100-@

--------------------quartz+batch---------------

quartz是负责定时触发策略，指定时间（到点或要求定时轮询询）才提交给批次执行器batch去批量执笔sql。

1)新增任务
JOBID：JOB唯一ID,如：PCS_107--必填，且不能重复（代码校验）；
作业名称：JOB名称,如：统一渠道对账--必填，且不能重复（代码校验）；
cron表达式：JOB定时规则，比如每天17:20:00执行（0 20 17 1/1 * ?）--必填；
状态：JOB启用状态----必填；
阻塞是否报警：到了下次调度时间却没进行调度，阻塞了是否报警---必填；
阻塞多久报警：阻塞多久报警---选填；
系统编码：对应所在系统编码---必填；
子系统编码：自定义子编码---选填；
任务描述：自定义描述---必填；

job_config创建一条

2)添加任务下的步骤信息
stepId：按照实际名称进行填写,如：PCS_107_1
排序序号：步骤序号，目前一组对应一个service，填1就行--必填（代码校验）；
步骤分组：步骤分组名称，对应dubbo服务的group名称,如：TransCheckTask--必填，且不能重复（代码校验）；
调用方式：JOB定时规则,默认选dubbo：--必填；
步骤描述：自定义步骤描述----选填；
业务参数：业务参数----选填；

job_step_config按每步骤各创建一条
                   
3)装载JOB
这步没有要填的参数，点击装载job按钮确定执行就完成装载了。
装载之后，满足第一步设置的定时cron规则时，就会执行调度任务。
正常需求到此步即可。    

       
                   
4)执行JOB
如果想立即执行，操作此项，选当前日期即可。
时分秒会自获取当前时分秒。

5)取消调度
如果装载了，又后悔，想取消已经装载的调度任务，就点击取消调度。

--------------------quartz---------------

原理：quartz的集群解决方案里有张表scheduler_locks，quartz采用了悲观锁的方式对triggers表进行行加锁，以保证任务同步的正确的唯一性。
缺点：quartz的分布式只是解决了高可用的问题。由于其锁读等待，并没有解决任务分片的问题，还是会有单机处理的极限，没有利用好多机资源。

问题一：调用API的的方式操作任务，不人性化；
问题二：需要持久化业务QuartzJobBean到底层数据表中，系统侵入性相当严重。
问题三：调度逻辑和QuartzJobBean耦合在同一个项目中，这将导致一个问题，在调度任务数量逐渐增多，同时调度任务逻辑逐渐加重的情况下，此时调度系统的性能将大大受限于业务；
问题四：quartz底层以“抢占式”获取DB锁并由抢占成功节点负责运行任务，会导致节点负载悬殊非常大；而XXL-JOB通过执行器实现“协同分配式”运行任务，充分发挥集群优势，负载各节点均衡。

---原理介绍---
Quartz核心：Quartz的核心元素主要有Scheduler、Trigger、Job、JobDetail

--------------------其他-xxl-job---------------
原理： xxl-job-admin作为注册中心,统一；

与quartz相比的优点：
都支持多节点集群调度中心（建议通过nginx为调度中心集群做负载均衡，分配域名。调度中心访问、执行器回调配置、调用API服务等操作均通过该域名进行，提升调度系统容灾和可用性）
1、路由策略：任务执行器忙碌转移策略（忙碌服务未挂）、任务执行器故障转移策略（服务挂掉）
2、本身已集成邮件报警、支持自定义开发拓展短信、钉钉等报警方式。
3、任务进度监控

 

 

 

------------同类框架比较-----------

大众点评许雪里开源文档：https://www.xuxueli.com/xxl-job/

参考：、

https://www.cnblogs.com/caison/p/11641161.html

 

同类框架比较

特性	quartz	elastic-job-lite	xxl-job	LTS
依赖	MySQL、jdk	jdk、zookeeper	mysql、jdk	jdk、zookeeper、maven
高可用	多节点部署，通过竞争数据库锁来保证只有一个节点执行任务	通过zookeeper的注册与发现，可以动态的添加服务器	基于竞争数据库锁保证只有一个节点执行任务，支持水平扩容。可以手动增加定时任务，启动和暂停任务，有监控	集群部署,可以动态的添加服务器。可以手动增加定时任务，启动和暂停任务。有监控
任务分片	×	√	√	√
管理界面	×	√	√	√
难易程度	简单	简单	简单	略复杂
高级功能	-	弹性扩容，多种作业模式，失效转移，运行状态收集，多线程处理数据，幂等性，容错处理，spring命名空间支持	弹性扩容，分片广播，故障转移，Rolling实时日志，GLUE（支持在线编辑代码，免发布）,任务进度监控，任务依赖，数据加密，邮件报警，运行报表，国际化	支持spring，spring boot，业务日志记录器，SPI扩展支持，故障转移，节点监控，多样化任务执行结果支持，FailStore容错，动态扩容。
版本更新	半年没更新	2年没更新	最近有更新	1年没更新

 

一、注册过程源码

 

二、任务规则配置和调度
通过第一步的开发代码，实现了执行子类业务逻辑和调度中心的绑定关系（注册完成）。
接下来就只需要在调度中心admin的ui管理台去添加调度任务及调度规则,（也可以立马执行一次），等到点执行。