HDFS SnapShot原理

HDFS快照是文件系统在特定时刻的备份,用于防止误操作、备份和灾难恢复。允许快照后,可通过`createSnapshot`创建,`lsSnapshottableDir`查看所有可快照目录,`cp`恢复,`deleteSnapshot`删除。实现原理是通过记录目录变化在快照节点,删除文件并非实际删除,而是移到快照下。关键数据结构包括DirectoryDiffList和DirectoryDiff,用于保存快照与当前目录差异。
摘要由CSDN通过智能技术生成

【简介】

HDFS快照简单地说就是对某个文件夹进行备份,创建了快照的文件夹本身不能被删除,但是文件夹里面的文件和文件夹都是可以被删除的。在对一个文件夹创建快照之前,需先允许该文件夹可以创建快照
允许快照
hdfs dfsadmin -allowSnapshot <path>

创建快照
hdfs dfs -createSnapshot <path> [<snapshotName>]
其中snapshotName是快照名,可选参数,不填的话会自动生成一个快照名,命名规则类似:s20180118-174044.492,创建快照后,会在文件夹下看到.snapshot目录,该目录存放所有的快照

查看所有的snapshottable
hdfs lsSnapshottableDir

恢复快照
hdfs dfs -cp <snapshotpath> <path>

删除快照
hdfs dfs -deleteSnapshot <path> <snapshotName>

取消快照
hdfs dfsadmin -disallowSnapshot <path>
取消快照之前,需先删掉所有的快照

快照对比
hdfs snapshotDiff <path> <fromSnapshot> <toSnapshot>


HDFS中可以对目录创建Snapshot,创建之后不管后续目录发生什么变化,都可以通过snap

  • 6
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值