xxljob使用总结

目录

一、概述及资料

二、设计及架构

1.系统组成

1.1调度模块（调度中心）

1.2 执行模块（执行器）

2.调度模块

2.1 自研调度模块

2.2 调度中心HA（集群）

2.3 任务失败告警

2.4 阻塞处理策略

3.执行器模块

三、问题与解答

3.1 什么是分片广播

3.2 执行器注册机制

3.3 新版本如何避免任务重复执行？

3.4 避免任务重复执行（官方文档给出的解决，其实老版本仍然会有重复调度的问题，使用quartz的版本）

3.5.执行器端口

3.6 老版本自有bug，句柄数过多导致任务调度失败，修改源码修复

3.7 任务重复执行，有可能的原因

3.8 xxljob新版本特性：

3.9 使用中可以做的改造

3.10 注册和销毁

---

一、概述及资料

XXL-JOB是一个分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。

git地址：https://github.com/xuxueli/xxl-job/tree/2.2.0

官方文档：分布式任务调度平台XXL-JOB

二、设计及架构

1.系统组成

1.1调度模块（调度中心）

负责管理调度信息，按照调度配置发出调度请求，自身不承担业务代码。调度系统与任务解耦，提高了系统可用性和稳定性，同时调度系统性能不再受限于任务模块；

支持可视化、简单且动态的管理调度信息，包括任务新建，更新，删除，GLUE开发和任务报警等，所有上述操作都会实时生效，同时支持监控调度结果以及执行日志，支持执行器Failover。

1.2 执行模块（执行器）

负责接收调度请求并执行任务逻辑。任务模块专注于任务的执行等操作，开发和维护更加简单和高效；

接收“调度中心”的执行请求、终止请求和日志请求等。

2.调度模块

2.1 自研调度模块

XXL-JOB最终选择自研调度组件（早期调度组件基于Quartz）；一方面是为了精简系统降低冗余依赖，另一方面是为了提供系统的可控度与稳定性；

XXL-JOB中“调度模块”和“任务模块”完全解耦，调度模块进行任务调度时，将会解析不同的任务参数发起远程调用，调用各自的远程执行器服务。这种调用模型类似RPC调用，调度中心提供调用代理的功能，而执行器提供远程服务的功能。

2.2 调度中心HA（集群）

基于数据库的集群方案，数据库选用Mysql；集群分布式并发环境中进行定时任务调度时，会在各个节点会上报任务，存到数据库中，执行时会从数据库中取出触发器来执行，如果触发器的名称和执行时间相同，则只有一个节点去执行此任务。

2.3 任务失败告警

默认提供邮件失败告警，可扩展短信、钉钉等方式。如果需要新增一种告警方式，只需要新增一个实现 “com.xxl.job.admin.core.alarm.JobAlarm” 接口的告警实现即可。可以参考默认提供邮箱告警实现 “EmailJobAlarm”。

2.4 阻塞处理策略

调度过于密集执行器来不及处理时的处理策略，策略包括：单机串行（默认）、丢弃后续调度、覆盖之前调度