纪念一波，九师兄博客热门订阅专栏时常名列前茅，我飘了，哈哈哈哈，得意的笑
1.概述
以前遇到一个问题，这个问题是这样的，一个FLink job，然后部分是离线任务，数据读取完毕了，就结束了。然后发现就不做检查点了，当时没想明白，然后找到了一个老版本才出出现这样的问题。
参考：【Flink】Flink 部分算子是 FinishSHED 不做checnpoint
然后今天在一个博客中发现了原因，参考：面向流批一体的 Flink Runtime 新进展
20220813日 在
本文详细介绍了Flink在处理部分task结束后如何进行checkpoint的问题，包括其在20220813日的更新，支持部分task结束后的checkpoint操作，旨在解决数据一致性与作业结束流程中的挑战。同时，文中提到了Hybrid source，允许在有限流数据和批数据之间切换，以适应流批一体的处理需求。
纪念一波，九师兄博客热门订阅专栏时常名列前茅，我飘了，哈哈哈哈，得意的笑
订阅专栏 解锁全文
扫一扫
1174
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
