![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
flink
你最好看
这个作者很懒,什么都没留下…
展开
-
Flink-关于barrier对齐/不对齐,及实现
Flink1.11版本提供不对齐的检查点保存方式,可以将未处理的缓冲数据也保存进检查点。这样遇到分区barrier时就不需要等待对齐,而是可以直接启动状态的保存。Flink默认是禁用检查点的,如果需要开启自动保存快照的功能,需要在代码中调用执行环境的enableCheckpointing()方法,参数毫秒。:等到上游所有的并行子分区barrier都到齐,才去保存当前任务的状态。缺点:先到达的分区要做缓存等待,会造成数据数据堆积(背压)缺点:每个检查点较对齐方式需要保存更多信息,即未处理的数据。原创 2022-09-06 14:11:24 · 2663 阅读 · 0 评论 -
Flink-Reduce进行归约聚合(案例之找点击次数最活跃(即访问量最大))
【代码】Flink-Reduce进行归约聚合(案例之找点击次数最活跃(即访问量最大))原创 2022-09-06 14:03:29 · 236 阅读 · 0 评论