扫一扫加入大数据公众号和技术交流群,了解更多大数据技术,还有免费资料等你哦
Exactly-Once 语义
exactly-once语义指的是每个输入的事件只影响最终结果一次。即使机器或软件出现故障,既没有重复数据,也不会丢数据。分布式系统都是关于取舍平衡,基本上存在三种类型的传递语义:最多一次at-most-once,至少一次at-least-once和正好一次exactly-once。其中正好一次exactly-once实现最为困难,本篇文章详细介绍一下flink如何实现exactly-once语义。
Flink一次性语义实现原理
说到flink的Exactly-Once,要区分实现的范围。在 Flink 1.4.0 之前,Exactly-Once 语义仅限于 Flink 应用程序内部,并没有扩展到 Flink 数