Hadoop HDFS Trash 回收站使用指南

@SmartSi

已于 2022-08-02 21:42:23 修改

阅读量1.2w

点赞数 2

分类专栏： Hadoop 文章标签： Hadoop Trash 回收站

于 2017-12-22 09:37:49 首次发布

本文链接：https://blog.csdn.net/sunnyyoona/article/details/78869778

版权

Hadoop 专栏收录该内容

41 篇文章 8 订阅 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了Hadoop HDFS的回收站机制，包括如何配置、使用及清空回收站。回收站类似于操作系统中的回收站，用于防止意外删除数据。启用后，删除的文件会被移动到回收站，经过一定时间后被永久删除。检查点功能用于管理回收站中的文件，以确保数据可恢复。用户可以通过命令行工具立即删除回收站中过期的文件。在生产环境中，建议启用回收站功能，但需合理设置参数以平衡空间使用和数据保护。

摘要由CSDN通过智能技术生成

我们在删除一个文件时，遇到如下问题，提示我们不能删除文件放回回收站:

sudo -uxiaosi hadoop fs -rm -r tmp/data_group/test/employee/employee_salary.txt
17/12/06 16:34:48 INFO fs.TrashPolicyDefault: Namenode trash configuration: Deletion interval = 72000000 minutes, Emptier interval = 0 minutes.
17/12/06 16:34:48 WARN fs.TrashPolicyDefault: Can't create trash directory: hdfs://cluster/user/xiaosi/.Trash/Current/user/xiaosi/tmp/data_group/test/employee
rm: Failed to move to trash: hdfs://cluster/user/xiaosi/tmp/data_group/test/employee/employee_salary.txt. Consider using -skipTrash option

去回收站对应目录下观察一下，得出的结论是：无法创建目录employee，因为employee文件已经存在，自然导致employee_salary.txt文件不能放回收回站: