从0到1Flink的成长之路(二十)-Flink 高级特性(二)之Savepoint

本文介绍了Flink的Savepoint功能,作为有计划的手动备份和恢复手段。它允许用户在集群维护或扩容前创建保存点,以便在操作完成后从保存的状态恢复。Savepoint与Checkpoint的主要区别在于其手动触发和独立管理。文中还提供了启动YARN session进行Savepoint操作的示例。
摘要由CSDN通过智能技术生成

Savepoint

在这里插入图片描述
保存点由用户手动创建、拥有和删除,它们的用例用于有计划的、手动的备份和恢复。
savepoints
Savepoint 介绍
Savepoint:保存点,类似于以前玩游戏的时候,遇到难关/遇到boss,赶紧手动存个档,然后接着玩,如果失败了,赶紧从上次的存档中恢复,然后接着玩。
在实际开发中,可能会遇到这样的情况:如要对集群进行停机维护/扩容…
那么这时候需要执行一次Savepoint,也就是执行一次手动的Checkpoint,也就是手动的发一个barrier栅栏,那么这样的话,程序的所有状态都会被执行快照并保存,当维护/扩容完毕之后,可以从上一次Savepoint的目录中进行恢复。

Savepoint VS Checkpoint
在这里插入图片描述
Checkpoint 与Savepoint区别:
在这里插入图片描述
Savepoint 演示

> # 启动yarn session /export/server/flink/bin/yarn-session.sh -jm 1024 -tm 1024 -s 2 -d

          运行job-会自动执行Checkpoint
          
          /export/server/flink/bin/flink run -d \
          --class cn.itcast.flink.checkpoint.StreamCheckpointDemo \ /root/ckpt.jar
          hdfs://node1.itcast.cn:8020/flink-checkpoint/checkpoint
          
          手动创建savepoint--相当于手动做了一次Checkpoint
          
          /export/server/flink/bin/flink savepoint
          461e4d99b207e435022a6bd2f7b2e5bd \
          hdfs://node1.itcast.cn:8020/flink-checkpoint/savepoint/
          
          停止job
          
          /export/server/flink/bin/flink cancel
          461e4d99b207e435022a6bd2f7b2e5bd 
          
          重新启动job,手动加载savepoint数据
          
          /export/server/flink/bin/flink run -d \ -s
          hdfs://node1.itcast.cn:8020/flink-checkpoint/savepoint/savepoint-461e4d-fb937e8062f7
          \
          --class cn.itcast.flink.checkpoint.StreamCheckpointDemo \ /root/ckpt.jar
          hdfs://node1.itcast.cn:8020/flink-checkpoint/checkpoint
          
          停止yarn session
          
          yarn application -kill application_1598434063229_0001
  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 4
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值