RPC：时钟轮解决定时任务以及超时检测

已于 2022-09-16 12:26:03 修改
阅读量653 收藏 1
点赞数
分类专栏： 计算机理论与基础 文章标签： 系统设计 rpc 网络
于 2021-11-21 15:36:32 首次发布
原文链接：https://time.geekbang.org/
版权

定时任务带来了什么问题

我们来看一下RPC框架是如何处理超时请求的：

  • RPC中，无论是同步调用还是异步调用，调用端内部实行的都是异步
    • 调用端在向服务端发送消息之前会创建一个Future，并存储这个消息标识与这个Future的映射
    • 当服务端收到消息并且处理完毕后向调用端发送响应消息，调用端在接收到消息后会根据消息的唯一标识找到这个Future，并将结果注入到这个Future

那这个过程中，如果服务端没有及时响应消息给调用端呢？调用端应该如何处理超时的请求？

  • 可以利用定时任务
  • 每次创建一个Future，我们都记录这个Future的场景时间与这个Future的超时时间，并且有一个定时任务进行检测
  • 当这个Future到达超时时间并且没有被处理时，我们就对这个Future执行超时逻辑

时钟轮在 RPC 中的应用

在 RPC框架中只要涉及到定时相关的操作，我们就可以使用时钟轮。

那么 RPC 框架在哪些功能实现中会用到它呢？

  • 请求超时处理：每发一次请求，都创建一个处理请求超时的定时任务放到时钟轮里面，在高并发、高访问量的情况下，时钟轮每次只轮询一个时间槽中的任务，这样会大量节省CPU
  • 调用端和服务端的启动超时：以调用端为例，假设我们想要让应用可以快速的部署，比如1分钟内启动，超过1分钟则启动失败。我们可以在调用端启动时创建一个处理启动超时的定时任务，放到时钟轮里
  • 定时心跳：RPC调用端定时向服务端发送心跳，来维护连接。我们可以将心跳的逻辑封装为一个心跳任务，放到时钟轮里。但心跳任务是要定时执行的，而时钟轮中的任务执行一遍就被移除了，对于这种需要重复执行的定时任务我们应该如何处理呢？在定时任务的执行逻辑的最后，我们可以重设这个任务的定时时间，把它重新丢回时钟轮里
OceanStar的学习笔记
关注
专栏目录
聊聊 时钟轮 在 RPC 中的应用
m0_71777195的博客
08-02 83
这个问题也不难解决，我们只要找到一种方式，减少额外的扫描操作就行了。比如我的一批定时任务是 5 秒之后执行，我在 4.9 秒之后才开始扫描这批定时任务，这样就大大地节省了 CPU。这时我们就可以利用时钟轮的机制了。我们先来看下我们生活中用到的时钟。很熟悉了吧，时钟有时针、分针和秒针，秒针跳动一周之后，也就是跳动 60 个刻度之后，分针跳动 1 次，分针跳动 60 个刻度，时针走动一步。而时钟轮的实现原理就是参考了生活中的时钟跳动的原理。
定时超时任务
qq_37377082的博客
03-04 565
一个有用的类 @Slf4j public class Task { /** * 任务ID */ private String id; /** * 任务名 */ private String name; /** * 超时时间，毫秒 */ private long timeout = Integer.MAX_VALUE; /** * 初始延时，毫秒 */ private
超时处理，延迟处理问题解决方案
猪猪
08-16 704
在设计订单超时自动取消的解决方案时，需要根据实际业务需求、系统规模、性能要求以及维护成本等因素综合考虑。对于小型到中型的业务系统，可以考虑使用定时任务轮询数据库的方式；对于需要更高可靠性和扩展性的系统，可以考虑使用Redis缓存与监听或消息队列等方案。同时，也可以结合多种方案来优化系统性能和可靠性。如何设计订单超时自动取消面试官：生成订单30分钟未支付，则自动取消，该怎么实现？-云社区-华为云订单超时未支付自动取消5种实现方案_订单超时取消 延时队列-CSDN博客。
时钟轮在 RPC 中的应用
码猿技术专栏
07-04 218
今天这篇文章介绍一下RPC中如何使用时钟轮实现定时任务，比如调用端的超时处理、定时心跳.... 定时任务带来了什么问题？ 在讲解时钟轮之前，我们先来聊聊定时任务。相信你在开发的过程中，很多场景都会使用到定时任务，在 RPC 框架中也有很多地方会使用到它。就以调用端请求超时的处理逻辑为例，下面我们看一下 RPC 框架是如果处理超时请求的。 在讲解 Future 的时候说过：无论是同步调用还是异步调用，调用端内部实行的都是异步，而调用端在向服务端发送消息之前会创建一个 Future，并存储这个消息标识与这个 F
定时任务超时处理方法
qq_32682035的博客
02-10 5401
   final ExecutorService exec = Executors.newFixedThreadPool(1);              Integer status=0;            Callable<Integer> call = new Callable<Integer>() {                  public Intege...
设计定时任务自动检查解决方案(基于esJob)
哆啦A梦
03-23 1471
设计一个自动检查定时任务执行情况项目 基于esJob
从定时任务-到任务调度系统xxl-job
weixin_44248755的博客
07-23 1496
定时任务的今生前世以及xxl-job调度系统
datax 定时执行多个job_分布式任务调度平台XXL-JOB使用详解
weixin_39652154的博客
11-23 690
基本介绍项目开发中，常常以下场景需要分布式任务调度：同一服务多个实例的任务存在互斥时，需要统一协调定时任务的执行需要支持高可用、监控运维、故障告警需要统一管理和追踪各个服务节点定时任务的运行情况，以及任务属性信息，例如任务所属服务、所属责任人因此，XXL-JOB应运而生：XXL-JOB是一个开源的轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展、开箱即用，其中“XXL”...
RPC深入解析（下）
qianxingx的博客
04-27 177
2.1 网络IO模型 有哪些网络IO模型 分为五种： 同步阻塞 IO（BIO） 同步非阻塞 IO（NIO） IO 多路复用 信号驱动IO 异步非阻塞 IO（AIO） 常用的是同步阻塞 IO 和 IO 多路复用模型。 什么是阻塞IO模型 IO多路复用 IO多路复用的实现主要有 select，poll 和 epoll 模式。 文件描述符： 在 Linux 系统中一切皆可以看成是文件，文件又可分为：普通文件、目录文件、链接文件和设备文件。 三者的区别： 基于 selec
计算机组策略定时开机脚本,简单几步实现电脑定时开机
weixin_32512187的博客
07-27 3018
服务器应用 windows 电脑定时开机... (shuke.2013-12-30 08:23)让电脑每天定时自动开机，坐在电脑前就可以直接使用电脑，而不必再为开机时间等待。听起来很不错吧？但需要如何做才能让电脑定时开机呢？第一步：在BIOS设置主界面中选择"Power Management Setup"，进入电源管理窗口。缺省情况下，"Resume By Alarm"定时开机选项是关闭的。第二步...
ASIO网络调试助手之三：ASIO网络编程注意事项
最新发布
草上爬的博客
09-14 1134
之前用过uv-cpp，和ASIO一样， 也支持异步机制，因此ASIO用起来还是比较顺手的，下面是个人总结的四点注意事项。
组：轻量级框架。实现了定时任务功能，分布式任务变量，命令行控制台，数据库脚本自动化，单元测试，rpc服务，多进程服务（模拟map-reduce）等等实用的功能！！ https：fucongcong.gitbooks.iogroup-doccontent
02-05
组 组启动异步协程分支。 编写此框架的意义： 首先现在流行的框架有很多。编写这个框架，其实可以说这个框架的特色，与其他框架的区别。 async多任务处理任务支持，业务逻辑复杂性能差？多进程帮你解决性能问题！ 一键启动rpc服务，不与主业务冲突，轻松完成后续SOA转行，支持TCP HTTP Websocket协议 一键启动定时任务，还在用系统自带的cronjob？（支持子进程重启，自动重启，防止内存泄漏） 一键启动任务，还在自己集成的服务？ 目录结构清晰简单 轻量级 包管理composer支持。 架构可扩展性，规范的命名空间化，自己的扩展类库随时可行 调试工具条支持，发现性能问题？找你的sql
Linux Crontab定时任务介绍及检测思路分析
#7的博客
04-12 1001
本文介绍了Linux定时任务，以及对应的检测思路
Go工具集-2（定时任务，TCP客户端，RPC基本实现，PProf 调优工具,map转Struct，以及Json转Struct工具包，二进制的位处理）
gcglhd的博客
02-24 219
1.golang 定时任务time.Sleep和time.Tick实现结果比较 https://blog.csdn.net/zkt286468541/article/details/89403306 2. GoLand开发一个性能不错的TCP客户端 https://blog.csdn.net/niyuelin1990/article/details/77868574
定时任务（crontab,at,systemd实时定时）
deng2126757968的博客
04-10 1535
Timer定时器是一种用于定时执行任务的工具。它依赖时钟源进行计数，当达到预设值时触发事件。Timer定时器在多个领域广泛应用，如嵌入式系统、通信和自动化。它简单易用，但需注意任务执行方式可能是串行的。总体而言，Timer定时器是实现定时处理任务的有效手段。本文就会教大家如何使用timer定时器。而定时器又分两种，分别为单调定时器与实时定时器，但本质并没有什么区别，只是单元文件不一样。该处直接利用上述所自定义服务进行定时服务作为例子。
时钟轮在RPC中的应用
凯凯王的技术生涯
11-18 469
文章目录定时任务的解决方案sleep轮询时钟轮RPC中时钟轮的应用注意 定时任务的解决方案 RPC中很多场景都会用到定时任务，比如调用端请求超时的处理逻辑，我们当时使用的是Future去实现调用，如下 调用端在向服务器发送之前会创建一个Future，然后记录下这个Future创建时间和这个Future的超时时间，并有一个定时任务进行检测，当Future到达超时时间没有被处理时，执行超时逻辑。 sleep 每创建一个Future，就启动一个线程，之后sleep，到达超时时间就触发请求超时的处理逻辑。 弊端是：
定时器实现原理——时间轮
一口Linux的专栏
08-21 4565
时间轮算法是通过一个时间轮去维护定时任务，按照一定的时间单位对时间轮进行划分刻度。然后根据任务延时计算任务落在该时间轮的第几个刻度上，如果任务时长超出了刻度数量，则需要增加一个参数记录时间轮需要转动的圈数。
深入浅出，SpringBoot整合Quartz实现定时任务与Redis健康检测（二）
ifever的博客
10-08 741
在上一篇文章中对SpringBoot整合Quartz做了初步的介绍以及提供了一个基本的使用例子，因为实际各自的需求任务不尽相同因此并未对定时任务的代码做相关填充。本文将对Redis的健康检测进行进一步的实现，并且将尝试逐步缩减相关代码，一步步优化定时任务的创建流程。
订单超时、定时任务解决方案和思路
zhaohan___的博客
02-22 2732
文章目录一、方案选择二、结论三、实施1.springboot引入redis2.添加配置3.监听数据超时4.redis配置数据超时通知6.测试controller项目源码参考文章 一、方案选择 1.redis数据超时处理 2.使用spring + quartz定时任务（支持任务信息写入mysql,多节点分布式执行任务），下单成功后，生成一个30分钟后运行的任务，30分钟后检查订单状态，如果未支付，则进行处理 3.写入数据库轮询 4.使用Java的定时器，不支持高可用，设置定时器的节点挂掉或者重启，任务失效！
JAX-RPC：简化SOAP消息交互的Java解决方案
JAX-RPC是一种Java API，专为简化应用程序与Web服务之间的通信而设计，特别是针对SOAP消息的处理。在传统的SOAP消息传递中，开发者需要深入理解SOAP协议的复杂性，包括消息格式、编码规则等，这在扩展性和代码可维护...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值