hadoop清空回收站

直接删除目录(不放入回收站)

hdfs dfs -rm -skipTrash /path/to/file/you/want/to/remove/permanently

如果不加-skipTrash,删除的目录会放入/user/hdfs/.Trash中。有专门的配置项来指定什么时候清空回收站。

清空回收站

hdfs dfs -expunge

This should give you output similar to this. Basically in a minute the trash will be emptied.

执行完命令后,回收站的数据不会立即被清理,而是先打了一个checkpoint。显示的是一分钟后清除。

实际验证,11T的数据需要好几分钟…..

16/09/18 
  • 0
    点赞
  • 19
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
HDFS中,删除文件后,文件并不会立即被彻底删除,而是被移动到回收站(/trash)中。这样可以使文件能够快速恢复。可以通过设置时间阈值来控制文件在回收站中的存放时间,当文件的存放时间超过阈值或回收站清空时,文件才会被彻底删除并释放占用的数据块。回收站的功能可以通过配置文件来设置。其中,fs.trash.interval参数用于设置文件在回收站中存放的时间间隔,通常设置为1天(1440分钟);fs.trash.checkpoint.interval参数用于设置回收站的检查点时间间隔,通常设置为2小时(120分钟)。这样,Hadoop回收站就能够实现删除数据的功能。<span class="em">1</span><span class="em">2</span> #### 引用[.reference_title] - *1* [hadoop回收站](https://blog.csdn.net/m0_61083409/article/details/123935275)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] - *2* [hadoop 回收站](https://blog.csdn.net/qq_36249352/article/details/123234450)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值