超级会员免费看
本文深入探讨Flink的checkpoint机制，重点分析对齐（Exactly-Once语义）与非对齐（At-Least-Once语义）在 BarrierBuffer 和 BarrierTracker 中的实现。通过对processBarrier方法的解析，揭示了数据流处理和状态容错的关键细节。
checkpoint是保证Flink状态容错的重要机制，通过checkpoint可以实现不同的数据语义，也就是我们所说的Exactly-Once与At-Least-Once，通过不同的checkpoint机制实现不同的数据语义，这里所说的机制表示的是checkpoint对齐机制：对齐，实现Exactly-Once语义，不对齐，实现At-Least-Once语义。
官方文档解释：
对齐通常发生在需要接受上游多个输入流的操作中，例如keyBy、join等操作，接下来将会从源码角度分析对齐机制的实现。
checkpoint机制的处理发生在StreamInputProcessor/StreamTwoInputProcessor中，该类主要负责从远端读取数据然后交给StreamOperator处理，数据读取由CheckpointBarrierHandler完成，同时也负责对齐机制的处理，由getNextNonBlocked方法完成，该接口有两个不同的实现类BarrierBuffer与BarrierTracker：
//在StreamInputProcessor/StreamTwoInputProcessor 中创建CheckpointBarr
订阅专栏 解锁全文
243
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
