Hadoop误删文件后恢复

最新推荐文章于 2024-07-01 13:45:44 发布
最新推荐文章于 2024-07-01 13:45:44 发布
阅读量2.1k 收藏 2
点赞数 1
分类专栏： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/SW_LCC/article/details/109521166
版权
本文介绍了如何在Hadoop中恢复误删的文件。当不慎删除文件夹后，由于Hadoop的回收站机制，文件会被移动到/user/hadoop/.Trash目录下。用户需要进入该目录，按照时间戳找到最近删除的文件或目录，将其移动回原位置来实现恢复。需要注意的是，如果在删除后进行了其他操作，可能会生成多个文件夹，要确保恢复的是正确的版本。
摘要由CSDN通过智能技术生成

删除文件

不小心把hdfs里面的文件夹删除了，执行命令如下:

hdfs dfs -rm -r /user/hadoop/analyse/game

到回收站中找到文件

设置回收站

    <property>
          <name>fs.trash.interval</name>
          <value>1440
最低0.47元/天 解锁文章
SW_LCC
关注
专栏目录
Hadoop回收站恢复已删除文件的服务器
YjKubernetes的博客
10-06 576
在这篇文章中，我们将探讨如何使用Hadoop回收站(trash)来恢复已删除的文件。它提供了一个可靠的文件系统Hadoop分布式文件系统(HDFS)，并且拥有回收站功能，可以在文件被删除后进行恢复。通过执行上述步骤，您可以使用Hadoop回收站来恢复已删除的文件。请注意，文件只能在回收站保留的时间范围内进行恢复，因此请尽快执行恢复操作以避免文件被永久删除。通过合理利用回收站功能，可以提高数据的安全性和可靠性，减少意外删除数据造成的损失。这将显示回收站中的文件列表，包括文件的权限、大小、修改日期等信息。
被误删的HDFS文件如何有效恢复
萌兔兔MMQ！！
08-15 515
NameNode在收到删除命令时，会先将这个命令写到edits中，然后会告诉DataNode执行真正的文件删除操作。所以我们在误删文件后，需要做的是立刻停止NameNode和DataNode节点，阻止删除命令的执行。OP_DELETE代表删除操作，可以将这个标记修改为安全的操作（如OP_SET_PERMISSIONS），如果这个命令在最后，可以直接删除，然后保存。文件的恢复存在以下几种情况：(主要和集群的繁忙状态有很大关系。最后再启动NameNode和DataNode节点，查看误删文件的恢复情况。...
如何恢复Hadoop中被删除的文件
天道酬勤
08-08 8387
hadoop的hdfs中被删除文件的恢复原理和回收站原理是一样的，就是在删除hdfs文件时，被删除的文件被移动到了hdfs的.Trash文件夹中，恢复时只需将该文件夹中文件拿出即可。具体操作如下： 　　1 设置.Trash文件夹 　　如果需要恢复hdfs中文件，就需要设置.Trash，hadoop的.Trash默认是关闭的。具体设置如下： 　　 　　fs.trash.inter
hdfs误删文件恢复教程
weixin_45780435的博客
04-23 874
hdfs误删文件恢复教程(前提回收站是开启状态) 一.查看是否开启回收站 1 查看配置文件 core-site.xml文件中是否开启该fs.trash.interval配置 2.相关配置: 将该配置文件添加到 core-site.xml中 <!-- 配置回收站--> <property> <name>fs.trash.interval</name> <value>1440</value>
在不开启回收站的情况下恢复Hadoop误删除文件
ciqingloveless的博客
04-22 1189
这个问题其实比较严重，提前说一下结论，能恢复的只有执行删除后未删除的数据，已经删除的数据无法恢复。 什么叫执行删除后未删除的数据呢，因为hadoop执行删除时是在edits文件中添加一个标记，然后慢慢删除，这其中有个过程，假如你只删除一个文件，那我估计这种方式是无法恢复的，这个办法只能恢复标记删除而未删除的记录。 停止Hadoop集群 停止集群这一步的时间，决定了你能恢复数据的多少，假如停止过慢，.........
hadoop文件误删恢复
AntKengElephant的博客
11-12 1163
HDFS 为我们提供了垃圾箱的功能，也就是当我们执行 hadoop fs -rmr xxx 命令之后，文件并不是马上被删除，而是会被移动到执行这个操作用户的 .Trash 目录下，等到一定的时间后才会执行真正的删除操作。看下下面的例子： $ sudo -uiteblog hadoop fs -rmr /user/iteblog/test.txt Moved: 'hdfs://it...
【HADOOP】hadoop恢复误删除文件
Data spark in Pypot
10-22 1661
当文件被rm后，它会move到当前文件夹下的.Trash目录下 如果你删除一个文件或目录多次，则hadoop会自动在name后加上数字序列号 这样，如果你误删除后，就可以有选择的恢复文件了 hadoop fs -mkdir /user/oplog/test hadoop fs -put *.txt /user/oplog/test hadoop fs -rmr /user/o
Hadoop如何恢复被删除的文件
u012474716的博客
12-28 1166
hadoop
hadoop 误删目录的恢复方法
LegenDavid's warehouse
01-23 3159
HDFS误删数据怎么办？（所谓人有失手马有失蹄，在处理HDFS中的数据时总会遇到一些“小”意外的） 答： 别担心，正常情况下，它并没有真正的删除，而是暂时先乖乖的躺在回收站里，大约20小时后才会被彻底的清理干净；当然如果在删除操作时加上了“-skipTrash”参数，那么这份数据是无法恢复的，因此我们这边建议不要随意随意使用“-skipTrash”参数。  那怎么把数据从回收站里
centos7 xfs文件系统误删恢复操作
热门推荐
来自一条咸鱼的洽谈
08-13 1万+
在centos7中我们使用的文件系统是xfs。 xfs中xfsdump xfsrestore俩个内置工具可以用来恢复我们删除的文件 xfs是为了大数据而产生。 比如说hadoop xfs 最大的支撑的单位8eb，3个文件可以支撑16tb 实验环境： 创建一个磁盘和分区呢，可以参考上一篇文章 centos6 ext4文件系统误删恢复操作创建一块新的硬盘，分区。3G sdb1 格式化，挂载 环境搭配好只好开始我们的实验 加入数据 mkdir test cd test touch a touch b 备份
Hadoop回收站trash-恢复删除的文件
09-04
关于hadoop恢复删除的文件，敬请参考
Hadoop集群误删数据紧急恢复详细步骤
最新发布
sunxunyong的博客
07-01 512
确认最早的FsImage文件replay的最后一个editlog文件的时间，若晚于删除操作的时间，即最早的FsImage文件存储的元数据中，已经将数据删除，故最早的FsImage文件已经无法用于数据恢复。若必须恢复，可以从操作系统层面，去恢复没有被覆写（overwrite）的硬盘（HDD）分区（sector）。最新checkpoint的元数据只有原来的1/4，故使用离当前时间点最近的fsimage。2、第一时间检查Fsimage文件，确认是否存在可用于数据恢复的Fsimage文件。
hadoop的回收站，帮助恢复误删的数据
03-06 4320
利用 hadoop fs -rmr (目录名)删除目录时易出现误删除的操作，如何解决：建立回收站！ 具体操作为： 找到配置文件core-site.xml，在其中添加如下信息：     fs.trash.interval     10080           Number of minutes between trash checkpoints. If z
如何恢复Hadoop的误删除文件
SunWuKong_Hadoop的博客
12-15 6631
利用 hadoop fs -rmr (目录名)删除目录时易出现误删除的操作，如何解决：建立回收站！ 具体操作为： 找到配置文件core-site.xml，在其中添加如下信息： &lt;property&gt;     &lt;name&gt;fs.trash.interval&lt;/name&gt;     &lt;value&gt;10080&lt;/value&gt;     &lt;...
hadoop配置文件还原_老师，我好像把hadoop配置文件给删了，要怎么办
weixin_39622398的博客
12-19 312
我在安装完hadoop后，在配置到mkdir temp 这个地方的时候，我用了rm-rf把他删了，结果好像很多文件都没了，我这个要重新安装hadoop吗？还是我要重新导入相关的配置文件[hadoop@hadoop001 app]$ cd temp[hadoop@hadoop001 temp]$ pwd/home/hadoop/app/temp[hadoop@hadoop001 temp]$ rm ...
linux里边卸载hadoop,删除恢复Hadoop集群中的DataNode
weixin_32279335的博客
05-06 627
使用命令刷新节点信息：[hdfs@hmc ~]$ hadoop dfsadmin -refreshNodes查看hdfs的使用报告：[hdfs@hmc ~]$ hadoop dfsadmin -report 红色字体状态表示节点退出Name: 192.168.100.210:50010Decommission Status : DecommissionedConfigured Capacity:...
HDFS系统上使用命令hadoop fs -rm -rf 误删文件补救
weixin_45381920的博客
06-22 4372
1.首先明确一点使用hadoop fs -rm -rf 并不是直接的删除文件而是将文件暂存在了hdfs的垃圾护收站里面,如果删除时间较久了就会被自动清理掉无法恢复建议第一时间去垃圾回收站恢复 2.下面我操作删除一个test.txt文件然后恢复的测试 3.删除之后我们去到.Trash文件夹下查看刚刚删除的文件，我们可以看到离我们最近的时间是11：34，无疑刚刚删除的文件就在它下面我们一级一级的查看下去就可以找到（如下所示） 4.将test.txt文件恢复(其实就是mv出去)....
hadoop集群恢复删除掉的节点
co_diy的专栏
12-16 2298
这两周在学hadoop，学的过程碰到一些问题，在这里写写. 今天的问题是怎么把删除的datanode恢复 当时因为没执行refreshNodes，结果datanode启动不成功 报了如下错误：  ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: org.apache.hadoop.ipc.RemoteException: java
hadoop fsck命令及namenode元数据修复.
ForestCat的专栏
08-10 1536
报错如下: FATAL org.apache.hadoop.hdfs.server.namenode.FSEditLog: Error: recoverUnfinalizedSegments failed for required journal (JournalAndStream(mgr=QJM to [192.168.76.201:8485, 192.168.76.202:8485, 192.168.76.203:8485], stream=null)) java.lang.AssertionEr.
HDFS回收站配置与文件恢复详解
HDFS的Trash回收站功能是Hadoop分布式文件系统(HDFS)设计中的一个重要特性，它模拟了Linux系统的回收站概念，旨在提供文件删除后的临时存储和保护。每个用户在HDFS中都有一个个人回收站目录，位于/user/用户名/....
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值