Flink的容错机制和一致性详解
Flink的容错机制和一致性详解一. 容错机制Flink 实现容错主要靠强大的CheckPoint机制和State机制。Checkpoint 负责定时制作分布式快照、对程序中的状态进行备份;State 用来存储计算过程中的中间状态。1 检查点1.1 一致性检查点其实就是所有任务的状态,在某个时间点进行的一份快照比如在所有任务都敲好处理完一个相同的输入数据的时候.flink会定期的保存状态的一致检查点.如果发生故障,这回使用最近的检查点来一致恢复应用程序的状态.步骤:1.重启2.从检查点
原创
2020-12-10 16:54:16 ·
348 阅读 ·
0 评论