javaweb集群实现定时任务抢占任务锁

最新推荐文章于 2024-09-23 17:58:54 发布
最新推荐文章于 2024-09-23 17:58:54 发布
阅读量5.6k 收藏 4
点赞数
分类专栏： java 文章标签： 分布式锁
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/chenwq726/article/details/90106959
版权
在JavaWeb集群环境中实现定时任务时，需要解决多进程任务锁抢占、任务锁在应用宕机时的释放及集群启动时间不一致导致的任务执行间隔问题。通过分析三种任务锁实现方式（悲观锁、悲观锁+事务、乐观锁），并提出在update语句中添加时间间隔条件以确保定时任务执行频率的一致性。同时，通过监听器接口ApplicationListener和ContextRefreshedEvent事件，实现在应用启动时同步启动定时任务。
摘要由CSDN通过智能技术生成

1、背景
数据库中存在一个预约时间表（t_reserve），和一个正在生效的时间表（t_time）
根据业务需求，在t_reserve表中配置多个不同的时间，然后定时去更新t_time表

2、问题
因为应用是集群部署，需要考虑
1）、多进程的任务锁抢占
2）、当抢占到任务锁的应用挂了，宕机的情况，没有释放任务锁，造成死锁
3）、集群部署，无法保证每台应用同时启动定时任务，多个定时任务的触发点会被错开，定时任务的间隔执行时间无法保证

3、实现
需要设计一个定时计划表（t_job）

job_name job__status start_time end_time interval
任务 运行状态
0-未运行
1-运行中		 开始时间 结束时间 任务锁过期时间
job 0 60

3.1）、任务锁的实现（列举当时想到的三种实现）
3.1.1）、本来打算使用forupdate实现悲观锁
a）、查询t_job，看是否有任务，任务是否在执行中

select * from t_job where job_name='job' forupdate; #行锁，会锁住t_job表的job这一行

forupdate锁表规则：
当有明确指定唯一行（如主键），那么就是行锁，其他行的数据，别的事务还是可以操作该表的
指定行不明确（如不等于某个主键值，会返回好多数据），那么就是表锁了，这时候锁了整个表，其他事务无法操作该表

b）、这儿又需要分两种情况 肯定会更新成功，悲观锁，同个只有同个时间可以操作
b.1）、当前查询到没有任务在执行
直接更新t_job表，将job_status置为1，表示抢占到任务锁


                

                
                
        

        

    

  


        

            

                    
                      最低0.47元/天 解锁文章
                        
                    
            

        

    

      

        

            

              
                
                  Carpoor奇
                
              
            

            

                关注
              
            

        

        

          
      

      

            

                专栏目录
          









                



	

		

			

				
					
javaweb大题，深入剖析

				
			

			

				

					m0_59183028的博客
				

				

					06-27
					
					185
					
				

			

		

		

			
				
为什么要分库分表？
首先回答一下为什么要分库分表，答案很简单：数据库出现性能瓶颈。用大白话来说就是数据库快扛不住了。
数据库出现性能瓶颈，对外表现有几个方面：

大量请求阻塞在高并发场景下，大量请求都需要操作数据库，导致连接数不够了，请求处于阻塞状态。
SQL 操作变慢如果数据库中存在一张上亿数据量的表，一条 SQL 没有命中索引会全表扫描，这个查询耗时会非常久。
存储出现问题业务量剧增，单库数据量越来越大，给存储造成巨大压力。

从机器的角度看，性能瓶颈无非就是CPU、内存、磁盘、网络这些，要解决性能瓶颈

			
		

	



                

            
              



	

		

			

				
					
Java Web从入门到实战

				
			

			

				

					m0_67393342的博客
				

				

					07-30
					
					2249
					
				

			

		

		

			
				
操作系统：管理计算机硬件与软件资源的计算机程序，同时也是计算机系统的内核与基石。主流操作系统Linux发展历程Linux特点Linux与其它操作系统的区别Linux发行商和常见发行版先安装虚拟机，再安装CentosVmware简介Vmware下载：https://www.vmware.com/cn.htmlCentOS镜像下载：https://www.centos.org/download/
高速下载地址简介：SecureCRT是一款支持SSH（SSH1和SSH2）的终端仿真程序，简单地说是Windows下

			
		

	



              


  
              

                


	

		

			

				
					
利用redis乐观锁实现tomcat集群抢占定时任务

				
			

			

				

					HelloWord_Wolf的专栏
				

				

					03-26
					
					4367
					
				

			

		

		

			
				
环境 四台tomcat作为集群，redis作为共享内存。
需求 定时任务获取文件的地址，监控这些文件的状态（未到，已到达，重发），将文件状态保存；代码每台tomcat须一致。
实现 用redis写个消息队列，监控文件的程序作为消费者从消息队列中分别取得相应任务并且执行。
问题 如果四台tomcat的获取文件地址的任务都执行的话，会导致消息队列中每个任务*4，需要的只是每个任务查出来一次就可以了。
...

			
		

	





	

		

			

				
					
Java应用集群下的定时任务处理

				
			

			

				

					github_37553043的博客
				

				

					09-04
					
					3031
					
				

			

		

		

			
				
概述需求：有两台服务器同时部署了同一套代码。代码中写有Spring自带的定时任务，但是每次执行定时任务都只需要一台及其去执行。解决：mysql排他锁：如果同时的两个任务去写数据库中同一条记录，只有一条会成功。解决
首先单独创建一张表
CREATE TABLE `t_schedule_cluster` (
  `id` bigint(20) NOT NULL AUTO_INCREMENT COMMEN

			
		

	



		

			
		



	

		

			

				
					
如何动态创建一个定时任务，并支持集群部署？

					
最新发布

				
			

			

				

					yuiezt的专栏
				

				

					09-23
					
					243
					
				

			

		

		

			
				
② 要支持集群化部署。（即，即便是多个服务，也不会干扰；即便是某个服务器重启了，也不会影响执行）在 Application 中初始化 ThreadPoolTaskScheduler。比如，我要发送一封邮件，不是马上发出，而是定时在今天晚上23:59发送。动态任务类，包括开启任务方法、取消任务方法，以及多线程任务类。业务上需要创建一个配置，该配置在指定的未来时间生效。我们是基于Java 体系来实现该需求的。① 要支持多个这样的配置同时存在。

			
		

	





	

		

			

				
					
JAVA-定时任务@Scheduled && 解决定时任务执行多次@SchedulerLock 加锁

					
热门推荐

				
			

			

				

					君琴 的博客
				

				

					10-29
					
					1万+
					
				

			

		

		

			
				
记录JAVA项目中利用@Scheduled 配置定时任务，并利用@SchedulerLock加锁解决多实例部署定时任务多次执行的问题。

			
		

	





	

		

			

				
					
JAVA------多线程之开始

				
			

			

				

					山海可平的博客
				

				

					09-23
					
					115
					
				

			

		

		

			
				
JAVA 多线程（一）

什么是线程--What

线程是程序中不同的执行路径

并发：并非是同一时间执行多个线程，而是在一段时间内，cpu交替执行多个线程指令。

并行：在同一时间内，多个任务同时执行

如何启动线程--How

继承Thread类
	实现Runnable接口（有返回值时，实现Callable接口）
	jdk8后使用表达式
调用线程的start()方法后，main线程继续执行。


package thread;

/**
 * 启动现成的几种方式
 *继承Thread
 * Runna.

			
		

	





	

		

			

				
					
java定时锁_java-tryLock可轮询可中断可定时的锁

				
			

			

				

					weixin_28785657的博客
				

				

					02-19
					
					873
					
				

			

		

		

			
				
1、从JAVA5.0开始,提供了新的选择:ReentrantLock。2、可定时和可轮询的锁获取模式由tryLock方法实现。3、使用tryLock试图获得的锁如果不能同时获得，就回退，并重新尝试。休眠时间由一个特定组件管理。(下面的代码完成转帐)public boolean transferMoney(Account fromAcct,AccounttoAcct,DollarAmonunt am...

			
		

	





	

		

			

				
					
java锁与定时任务

				
			

			

				

					亲测，只为展现最完美的有效！
				

				

					02-26
					
					2882
					
				

			

		

		

			
				
定时任务 需要借助锁，尤其是异步定时任务。

如果没有锁，加入当前任务没有执行完毕，然后到时间又2继续执行，就会导致资源被为无限消耗。

代码例子


package com.hean.iot.adapter.xixunled.scheduled;

import com.hean.iot.platform.threadPool.ThreadPoolUtil;
import com.hean.iot.platform.utils.CountRunTimeCostUtil;
import org.spring

			
		

	





	

		

			

				
					
Java知识点概览

				
			

			

				

					qq_48403611的博客
				

				

					08-03
					
					3501
					
				

			

		

		

			
				
java后端开发常见面试题总结

			
		

	





	

		

			

				
					
超详细——Java面试高频

				
			

			

				

					qq_45708835的博客
				

				

					11-02
					
					4919
					
				

			

		

		

			
				
目录1.基础题1.1面向对象和面向过程的区别1.2 Java 语言有哪些特点1.3 Java 和 C++的区别1.4 什么是 Java 程序的主类 应用程序和小程序的主类有何不同1.5 Java 应用程序与小程序之间有那些差别1.6 字符型常量和字符串常量的区别1.7 基本类型1.8 构造器 Constructor 是否可被 override1.9 重载和重写的区别1.10 Java 面向对象编程三大特性: 封装 继承 多态1.11  String、StringBuffer 和 StringBuilder 

			
		

	





	

		

			

				
					
Java使用Redis与RedisTemplate实现分布式锁（应用场景：防止定时任务重复执行）

				
			

			

				

					源丶动丶力
				

				

					08-30
					
					897
					
				

			

		

		

			
				
Java使用Redis与RedisTemplate实现分布式锁

			
		

	





	

		

			

				
					
java中的锁

				
			

			

				

					Fighting_Man的博客
				

				

					09-10
					
					144
					
				

			

		

		

			
				
java中各种锁的简单实现于介绍

			
		

	





	

		

			

				
					
Java中实现定时任务

				
			

			

				

					Boy_Martin的博客
				

				

					07-29
					
					414
					
				

			

		

		

			
				
Java实现定时任务

			
		

	





	

		

			

				
					
JAVA-多线程，定时器，锁

				
			

			

				

					qq_43009048的博客
				

				

					10-10
					
					325
					
				

			

		

		

			
				
多线程，定时器，锁

			
		

	





	

		

			

				
					
java定时器及利用redis加锁应对分布式

				
			

			

				

					xi_nuo的博客
				

				

					05-09
					
					1964
					
				

			

		

		

			
				
1、利用spring编写定时任务@Component
@Configurable
@EnableScheduling //关键注解  
public class TimerScheduler {
   @Scheduled(cron = "0 0 0-23 * * ?") //时间表达式，每天整点执行
   public void emailPushByCron(){
      System.o...

			
		

	





	

		

			

				
					
《Java后端知识体系》系列之独占锁 Reentrant Lock 的原理

				
			

			

				

					qq_40126996的博客
				

				

					06-15
					
					227
					
				

			

		

		

			
				
周末两天跟女朋友出去high了一下，所以自己的知识整理也搁置了两天，手动狗头！

ReentrantLock概览
ReentrantLock是可重入的独占锁，所以只能有一个线程获得该锁，，其它获取该锁的线程会被阻塞而被放入该锁的AQS阻塞队列中，以下是ReentrantLock的类图。

从以上类图中可以看到，ReentrantLock最终还是使用AQS来实现的，并且根据参数来决定其内部是一个公平锁还是非公平锁，默认是非公平锁。
public ReentrantLock(){
	sync = new No.

			
		

	





	

		

			

				
					
Java应用集群下的定时任务处理方案(mysql)

				
			

			

				

					weixin_34032621的博客
				

				

					05-09
					
					1312
					
				

			

		

		

			
				
今天来说一个Java多机部署下定时任务的处理方案。需求: 有两台服务器同时部署了同一套代码， 代码中写有spring自带的定时任务，但是每次执行定时任务时只需要一台机器去执行。当拿到这个需求时我脑子中立马出现了两个简单的解决方案：利用ip进行判断， 两台机器ip肯定不一样， 指定某一台机器的ip运行。只在一台机器上部署定时任务的代码。最后两个方案又都被自己否决了。 第一条，如果指定ip的机器出现了...

			
		

	





	

		

			

				
					
关于集群定时任务的分布式锁解决方案

				
			

			

				

					天意young的博客
				

				

					06-09
					
					663
					
				

			

		

		

			
				
关于集群定时任务的分布式锁解决方案
业务场景：同样的后端服务要部署多台服务器，要求同一时间只有一台服务器在跑定时任务，并且当其中任何一台或者多台服务宕机，剩余服务器仍能执行任务。
方案：每台服务器的代码和配置文件一致。设计新表，除了主键id之外有一个lock字段（0表示解锁，1表示锁定）。设计之初设为0。
现在假设有三台集群服务器同时在跑定时任务，假设三台服务器同时进入定时任务，执行更新语句:update table_name set lock=1 where lock=0;此时根据数据库的事务机制，只可能

			
		

	





	

		

			

				
					
javaweb监听器实现定时任务

				
			

			

				

					06-09
				

			

		

		

			
				
在 JavaWeb 中，可以使用 `ServletContextListener` 接口实现监听器来实现定时任务。具体步骤如下：

1. 创建一个类实现 `ServletContextListener` 接口，并重写以下两个方法：

```java
public class MyServletContextListener implements ServletContextListener {

    @Override
    public void contextInitialized(ServletContextEvent sce) {
        // 在 web 应用启动时执行该方法，可以在此处实现定时任务的初始化操作
    }
 
    @Override
    public void contextDestroyed(ServletContextEvent sce) {
        // 在 web 应用关闭时执行该方法，可以在此处实现定时任务的销毁操作
    }
}
```

2. 在 `web.xml` 文件中注册该监听器：

```xml
<listener>
    <listener-class>com.example.MyServletContextListener</listener-class>
</listener>
```

3. 在 `contextInitialized()` 方法中使用 `java.util.Timer` 类或者 Spring 的定时任务来实现定时任务。例如，使用 `java.util.Timer` 类实现每隔 5 秒钟输出一次 "Hello World!"：

```java
@Override
public void contextInitialized(ServletContextEvent sce) {
    Timer timer = new Timer();
    timer.schedule(new TimerTask() {
        @Override
        public void run() {
            System.out.println("Hello World!");
        }
    }, 0, 5000);
}
```

这样，在 web 应用启动时，定时任务就会自动开始执行。需要注意的是，定时任务的执行会占用一定的系统资源，如果定时任务过于频繁，可能会影响系统性能，因此需要根据实际情况合理设置定时任务的时间间隔。

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值