hadoop 回收站



hadoop 回收站





Hadoop回收站trash,默认是关闭的。 

建议最好还是把它提前开开,否则误操作的时候,就。。。了

另外,如果你发现hdfs删除数据之后,磁盘空间并没有释放,多半就是Hadoop回收站的原因,只要清空Hadoop回收站就可以

1.修改conf/core-site.xml,增加

复制代码
<property> <name>fs.trash.interval</name> <value>1440</value> <description>Number of minutes between trash checkpoints. 
If zero, the trash feature is disabled. </description> </property>
复制代码

 

默认是0.单位分钟。这里我设置的是1天(60*24) 
删除数据rm后,会将数据move到当前文件夹下的.Trash目录

2.测试 
1)新建目录input

hadoop/bin/hadoop fs -mkdir input

 

2)上传文件

hdfs@master:/data/soft# hadoop/bin/hadoop fs -copyFromLocal /data/soft/file0* input


3)删除目录input

[root@master data]# hadoop fs -rmr input 
Moved to trash: hdfs://master:9000/user/hdfs/input


4)参看当前目录

[root@master data]# hadoop fs -ls 
Found 2 items 
drwxr-xr-x - root supergroup 0 2013-08-12 22:17 /user/hdfs/.Trash

 

发现input删除,多了一个目录.Trash

5)恢复刚刚删除的目录

[root@master data]# hadoop fs -mv /user/hdfs/.Trash/Current/user/root/input /user/hdfs/input


6)检查恢复的数据

[root@master data]# hadoop fs -ls input 
Found 2 items 
-rw-r--r-- 3 root supergroup 22 2011-02-12 17:40 /user/hdfs/input/file01 
-rw-r--r-- 3 root supergroup 28 2011-02-12 17:40 /user/hdfs/input/file02

 


6)删除.Trash目录(清理垃圾)

[root@master data]# hadoop fs -rmr .Trash 
Deleted hdfs://master:9000/user/hdfs/.Trash
 
 
其实hadoop提供一个清空回收站的语句,但是有时候需要清空两次
 hadoop fs –expunge 
 
 
 
 
 
 
 
 
 
 
 
 
 
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值