Flink 之 StateBackend 介绍 & 使用

34 篇文章 90 订阅 ¥39.90 ¥99.00
本文介绍了Flink的StateBackend,包括默认的MemoryStateBackend和FsStateBackend。讲解了如何配置StateBackend以将CheckPointing数据保存到HDFS或本地系统,并详细阐述了从Checkpoint恢复数据的步骤。通过实例展示了添加Hadoop整合包、编写WordCount任务和查看Checkpoints信息的过程。
摘要由CSDN通过智能技术生成

本文开头附:Flink 学习路线系列 ^ _ ^

1.StateBackEnd

       用来保存 State 的存储后端就叫做StateBackendStateBackend 默认是保存在 JobManager 的内存中,也可以保存在 本地文件系统 或者 HDFS 分布式文件系统中。

       当检查点(CheckPoint)机制启动时,状态将在检查点中持久化来应对数据的丢失以及恢复。而1.状态在内部是如何表示的? 2.状态是如何持久化到检查点中以及3.持久化到哪里都取决于选定的StateBackend。

2.可用的StateBackEnd

   Flink为我们提供了如下三种Statebackend实现:

     1. MemoryStateBackend

评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

扛麻袋的少年

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值