Flink中延时调用设计与实现

点击上方蓝

字关注~

       

                     

一、背景

在电商商品购买过程中有这样一些场景：用户点击下单，此时订单处于待支付状态，如果在2小时之后还处于待支付状态那么就将这笔订单取消，置为取消状态；用户收货之后可以对商品进行评价，如果在24小时内仍然没有评价，那么自动将用户对商品的评分设置为5星….等等，这样的场景都可以称之为延时处理场景，当数据发送出去了，不立刻进行处理，而是等待一段时间之后在处理，目前对于延时处理的方案也有很多，例如：

1. java中DelayQueue内部使用优先级队列方式存储消息体，存放的消息体实现Dealy接口，然后使用一个线程不断消费队列数据。

2. redis中SortedSet借助Redis的SortedSet数据结构，使用时间作为排序的方式，外部使用一个线程不断轮询该SortedSet。

3. 定时扫描数据库将延时触发的任务信息存储在数据库中，然后使用线程去轮序查询符合要求触发的定时任务。

在流处理中也经常会有一些定时触发的场景，例如定时监控报警等，并且时间窗口的触发也是通过延时调用触发，接下来了解flink中是如何实现延时处理。

二、Flink中延时调用

在flink实时处理中，涉及到延时处理可使用KeyedProcessFunction来完成，KeyedProcessFunction是flink提供面向用户的low level api，可以访问状态、当前的watermark或者当前的processingtime, 更重要的是提供了注册定时器的功能，分为：

1. 注册处理时间定时器，直到系统的processingTi