基于java的TimingWheel(时间轮算法)分布式任务调度系统

本文介绍了基于时间轮算法的分布式任务调度系统,通过Redis作为任务存储,利用Redis监听队列进行任务发布订阅,并详细阐述了系统的工作流程,包括任务存储、发布订阅和应用层的任务执行。同时讨论了系统优化点,如使用分布式锁和消息队列提高性能,以及数据持久化安全性等。
摘要由CSDN通过智能技术生成

    关于TimingWheel(时间轮)算法的任务定时器网上有很多文章,但是却找不到基于java成系统的文章,所以今天把我在公司做的且稳定运行半年多的TimingWheel系统分享给大家。

1 TimingWheel基本原理:

    众所周知寻常的定时器大概有两种,一种是开阻塞线程,另一种是开一个任务队列然后定期扫描。显而易见这两种方式的弊端很明显,前者对线程消耗过大,后者对时间消耗过大(很多未到时间的任务会被多次重复扫描消耗性能)

    为了解决以上两个问题就可以使用TimingWheel数据结构。

请先看下图:

    很明显时间轮算法是基于循环链表数据结构。那么他的工作原理具体是怎样的呢?

    能看到图中有个指针,我们假设指针没跳动一下需要10秒,然后现在我们有一个50秒后执行的任务A,由此推断在当前指针指向2的时候,任务A会被存放在槽格7中。当指针跳动到7后取出槽格中的任务队列,此时任务A将会被执行。但是当如果有100秒后的任务需要执行,依然超出了槽格数量是该怎么办呢?很简单,我们为任务实例添加一个属性“圈数”就可以解决。就是说每次装载任务时算出此任务需要指针转动几圈才能够被执行。

 

    以上就是时间轮算法的最基本的原理了,此外还有升级版复合时间轮算法用来解决巨大量的定时任务的一种解决方案。但这个不是本文重点,且网上有很多教学,感兴趣的同学可以自行去查看。

    好了核心算法做完简介后,进入本文重点,以时间轮算法为核心的分布式任务调度系统实现。

评论 6
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值