Flink 窗口处理函数 WindowFunction

传送门:Flink 系统性学习笔记


在之前的文章中我们已经了解了 Flink 的窗口机制,并介绍了其中涉及的组件:WindowAssigner、WindowFunction、Trigger、Evictor。在 Flink 窗口分配器 WindowAssigner 中我们知道可以通过不同类型的窗口分配器 WindowAssigner 将元素分配到窗口中。在指定 WindowAssigner 后,需要在每个窗口上指定我们要执行的计算逻辑,这就是窗口函数(WindowFunction)的责任。一旦系统确定窗口准备好处理数据,窗口函数就会被调用来处理窗口中的每个元素。

按照窗口计算原理划分,可用于处理窗口数据的函数有两种:

  • 增量聚合函数:增量聚合函数在窗口内以状态形式存储某个值,每个新加入的窗口的元素对该值进行更新,即窗口中只维护中间结果的状态值,不需要缓存原始数据。这种函数计算性能高,占有存储空间少,因为 Flink 可以在每个元素到达窗口时增量地进行聚合。代表函数有 ReduceFunction,AggregateFunction。
  • 全量窗口函数:全量窗口函数对属于该窗口的元素全部进行缓存,只有等到窗口触发的时候,才对所
  • 0
    点赞
  • 0
    收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
©️2022 CSDN 皮肤主题:成长之路 设计师:Amelia_0503 返回首页
评论

打赏作者

@SmartSi

你的鼓励将是我创作的最大动力

¥2 ¥4 ¥6 ¥10 ¥20
输入1-500的整数
余额支付 (余额:-- )
扫码支付
扫码支付:¥2
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、C币套餐、付费专栏及课程。

余额充值