Flink的一致性

1)at_most_once(最多一次)
	当任务故障时,最简单的做法是什么都不干,既不恢复丢失的状态,也不重播丢失的数据,最多处理一次事件。
2)at_least_once(至少一次)
	在大多数的真实应用场景,我们不希望丢失事件。这种类型的保障称为at_least_once,意思是所有的事件都得到了处理,而一些事件可能被处理多次。
3)exactly_once(精确一次)
	恰好处理一次是最严格的保证,也是最难实现的。恰好处理一次的意思是不仅仅意味着事件没有丢失,还意味着针对每一个数据,内部状态仅仅更新一次。
  • Flink使用了一种轻量级快照机制-检查点(checkpoints)来保证exactly-once语义
  • 有状态流应用的一致检查点,其实就是:所有任务的状态,在某个时间点的一份拷贝(一份快照)。而这个时间点,应该是所有任务都恰好处理完一个相同的输入数据的时候。
  • 应用状态的一致检查点,是flink故障恢复机制的核心。
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值