多节点服务器定时任务重复的一种解决方式

由于定时任务和主题代码写在一起,部署在两台服务器上,所以定时任务会执行两次,据说可以用乐观锁解决,所以特地记录一下。

  • 乐观锁和悲观锁
  • 悲观锁:总是假设最坏的情况,每次去拿数据的时候都认为别人会修改,所以每次在拿数据的时候都会上锁,这样别人想拿这个数据就会阻塞直到它释放锁。
  • 乐观锁:总是假设最好的情况,每次去拿数据的时候都认为别人不会修改,所以不会上锁,但是在更新的时候会判断一下在此期间别人有没有去更新这个数据。
  • 锁实现
    新建表:
CREATE TABLE `schedule_execute_info` (
  `id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '自增主键',
  `schedule_name` varchar(60) DEFAULT NULL COMMENT '任务名称',
  `version` bigint(20) DEFAULT 0 COMMENT '锁',
  `uu_id` varchar(150) DEFAULT NULL COMMENT '执行标识',
  `create_time` datetime DEFAULT NULL COMMENT '创建时间',
  `update_time` datetime DEFAULT NULL COMMENT '更新时间',
  PRIMARY KEY (`id`) USING BTREE
) ENGINE=InnoDB  DEFAULT CHARSET=utf8 ROW_FORMAT=DYNAMIC COMMENT='定时任务执行信息';

新增数据:
在这里插入图片描述
假如执行sql不上锁:

select * from schedule_execute_info where schedule_name = 'async';
update schedule_execute_info set uu_id = '000' where schedule_name = 'async';

多人执行修改操作会产生大量脏数据。

  • 使用乐观锁对修改操作上锁:
    可以通过version字段控制版本,再利用行锁的特性实现乐观锁
    假如两个线程同时执行了**select * from schedule_execute_info where schedule_name = ‘async’;**操作并拿到相同的数据。其中一条线程修改数据并加上了乐观锁:
update schedule_execute_info set uu_id = '111', version = version + 1 where schedule_name = 'async' and version = 0

在这里插入图片描述
此时另一条线程无法修改数据,避免了脏数据的产生。

  • 使用悲观锁:
    使用悲观锁,我们要禁止事务自动提交,改成手动提交,如果是autocommit模式 ,autocommit的值应该为 1 ,不autocommit 的值是 0。
set autocommit=0;
#0.开始事务
#begin;/begin work;/start transaction; (三者选一就可以)
begin;
#1.查
#select * from schedule_execute_info where schedule_name = 'async';
#2.增
INSERT INTO `schedule_execute_info`(`schedule_name`, `version`, `uu_id`, `create_time`, `update_time`) VALUES ('async2', 0, '548f145d-3e61-4206-b4f2-aca19a452954', '2021-11-09 16:09:31', NULL);
#3.改
update schedule_execute_info set uu_id = '222' where schedule_name = 'async'
#4.提交事务
#commit;/commit work;
commit;

select uu_id from schedule_execute_info where id=1 for update;
使用了select…for update的方式,这样就通过数据库实现了悲观锁。
此时在schedule_execute_info表中,id为1的 那条数据就被我们锁定了,
其它的事务必须等本次事务提交之后才能执行。
这样我们可以保证当前的数据不会被其它事务修改。
注:需要注意的是,在事务中,只有SELECT … FOR UPDATE
或LOCK IN SHARE MODE 同一笔数据时会等待其它事务结束后才执行

  • 采用乐观锁的方式去处理多节点问题:
    建表:
CREATE TABLE `schedule_execute_info`  (
  `id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '自增主键',
  `schedule_name` varchar(60) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL COMMENT '任务名称',
  `version` bigint(20) NULL DEFAULT 0 COMMENT '锁',
  `uu_id` varchar(150) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL COMMENT '执行标识',
  `execute_time` datetime(0) NULL DEFAULT NULL COMMENT '执行时间',
  `create_time` datetime(0) NULL DEFAULT NULL COMMENT '创建时间',
  `update_time` datetime(0) NULL DEFAULT NULL COMMENT '更新时间',
  PRIMARY KEY (`id`) USING BTREE
) ENGINE = InnoDB AUTO_INCREMENT = 3 CHARACTER SET = utf8 COLLATE = utf8_general_ci COMMENT = '定时任务执行信息' ROW_FORMAT = Dynamic;
INSERT INTO `schedule_execute_info` VALUES (1, 'SMS_SEND', 0, '8d5666ca-eefd-4d7c-b1f7-aa2d655b23b1', '2021-11-10 14:36:00', '2021-11-10 09:26:03', '2021-11-10 14:36:00');
INSERT INTO `schedule_execute_info` VALUES (2, 'OAAS_UPDATE', 0, '2a07319f-91ba-414e-85f3-57a672e8efbe', '2021-11-10 14:02:27', '2021-11-10 09:27:42', '2021-11-10 14:02:27');

实现锁代码:如果返回true变执行定时任务,false则不执行

package com.chinaunicom.service.schedule.impl;

import com.baomidou.mybatisplus.core.conditions.query.LambdaQueryWrapper;
import com.baomidou.mybatisplus.extension.service.impl.ServiceImpl;
import com.chinaunicom.api.exception.BusinessException;
import com.chinaunicom.api.model.eo.ScheduleExecuteInfo;
import com.chinaunicom.dao.ScheduleExecuteInfoMapper;
import com.chinaunicom.service.schedule.ScheduleExecuteInfoService;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
import org.springframework.stereotype.Service;

import javax.annotation.Resource;
import java.util.Date;
import java.util.Optional;
import java.util.UUID;

/**
 * <p>
 * 定时任务执行信息 服务实现类
 * </p>
 *
 * @author zhangyy
 * @since 2021-11-10
 */
@Service
public class ScheduleExecuteInfoServiceImpl extends ServiceImpl<ScheduleExecuteInfoMapper, ScheduleExecuteInfo> implements ScheduleExecuteInfoService {

    @Resource
    ScheduleExecuteInfoMapper scheduleExecuteInfoMapper;

    private static Logger logger = LoggerFactory.getLogger(ScheduleExecuteInfoServiceImpl.class);

    private static final Long INTERVAL = 5 * 1000L;

    @Override
    public boolean canExcute(String scheduleName) {
        Date now = new Date();
        ScheduleExecuteInfo info = Optional.ofNullable(
                scheduleExecuteInfoMapper.selectOne(new LambdaQueryWrapper<ScheduleExecuteInfo>() {{
                    eq(ScheduleExecuteInfo::getScheduleName, scheduleName);
                }})).orElseThrow(() -> new BusinessException("任务不存在!"));
        if (info.getExecuteTime() != null && Math.abs((now.getTime() - info.getExecuteTime().getTime())) <= INTERVAL) {
            logger.info("task :" + scheduleName + " has been executed by other nodes");
            return false;
        }
        info.setExecuteTime(now);
        info.setUuId(UUID.randomUUID().toString());
        info.setUpdateTime(now);
        int result = scheduleExecuteInfoMapper.updateVersion(info);
        if (result == 0) {
            logger.info("task :" + scheduleName + " has been executed by other nodes");
            return false;
        }
        return true;
    }
}

sql加锁

update
        schedule_execute_info
        set uu_id=#{uuId},execute_time=#{executeTime}, version=version+1,update_time=#{updateTime}
        where id=#{id} and version=#{version}
  • 3
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
### 回答1: 在 Java 中有许多用于创建定时任务的框架,其中最常用的是 `java.util.Timer` 和 `java.util.concurrent.ScheduledThreadPoolExecutor`。 `java.util.Timer` 是一个简单的定时任务框架,可以在指定的时间执行一个或多个任务。它使用单独的线程来执行任务,可以按照指定的周期或延迟执行任务。 `java.util.concurrent.ScheduledThreadPoolExecutor` 是一个更加复杂的定时任务框架,它可以执行周期性或延迟任务,并提供了对任务执行的更多控制,包括线程池的大小和任务的执行顺序。 还有其他一些用于创建定时任务的框架,例如 `Quartz`、`Spring Task` 和 `Guava's ScheduledExecutorService`。 要选择哪个框架取决于你的需求和偏好。如果只需要一个简单的定时任务,`java.util.Timer` 可能足够用了,但如果需要更多的控制和功能,则可能需要使用更复杂的框架,如 `java.util.concurrent.ScheduledThreadPoolExecutor`。 ### 回答2: Java定时任务框架是用于在指定时间或间隔循环执行任务的工具。它提供了一种简单而灵活的方法来安排和执行一些需要定时触发的操作。 最常见的Java定时任务框架是Java自带的Timer类和Quartz库。Timer类是Java中内置的定时任务框架,它允许您创建一个计划任务,并在指定的时间点或间隔周期性地执行它。但是,Timer类的功能有限,不适用于一些更复杂的定时任务需求。 Quartz库是一个功能强大且灵活的Java定时任务框架。它提供了更多的功能和选项来管理和调度任务。Quartz可以根据时间表、日期、间隔或从外部触发器等方式执行任务,并提供了更多的灵活性、可靠性和可扩展性。Quartz还支持集群环境和分布式部署,可以轻松地在多个节点上管理任务。 使用Java定时任务框架,可以方便地执行定时任务,例如定时生成报表、清理垃圾数据、发送定时通知等。您可以配置任务的执行时间、周期、参数和触发条件,还可以处理任务执行过程中的异常情况。通过使用适当的定时任务框架,您可以更好地管理和优化应用程序的性能和资源。 总而言之,Java定时任务框架提供了一种便捷的方式执行各种定时任务,可以满足各种需求。您可以根据具体的任务类型和需求选择合适的定时任务框架,以提高任务执行的精确性、稳定性和可靠性。 ### 回答3: Java定时任务框架是一种用于在预定时间执行代码的工具。它可以帮助我们创建和管理定时任务,使得我们可以在特定的时间间隔或时间点执行特定的操作。Java常用的定时任务框架有Quartz和Spring Task。 Quartz是一个功能强大且广泛使用的Java定时任务框架。它提供了许多用于设置和管理定时任务的功能,例如定义任务的执行时间、执行频率、执行策略等。Quartz还具有分布式和集群的支持,可以在多台服务器上同时执行任务,提高了任务的可靠性和可扩展性。通过使用Quartz,开发人员可以轻松地创建基于时间触发的代码任务,例如定时生成报表、定时发送邮件等。 Spring Task是Spring框架中的一个模块,用于处理定时任务。它是基于标准的Java Timer类实现的,通过注解的方式来定义和配置定时任务。Spring Task提供了简单易用的API,可以让开发人员以声明式的方式创建定时任务。除了基本的定时任务功能外,Spring Task还提供了更多的扩展功能,如定时任务异步执行定时任务的调度和管理等。通过使用Spring Task,我们可以更方便地集成和管理定时任务,减少了任务的配置和编码工作。 总的来说,Java定时任务框架可以帮助开发人员更灵活地控制和调度代码任务的执行,提高了代码的可复用性和扩展性。无论是Quartz还是Spring Task,它们都是成熟且广泛使用的框架,可以根据项目需求选择合适的框架来使用。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值