【HDFS】HDFS中的Trash功能

叹了口丶气

已于 2022-07-07 15:41:07 修改

阅读量1.3k

点赞数

分类专栏： HDFS全方位实战文章标签：大数据 hadoop hdfs

于 2020-11-10 16:22:43 首次发布

本文链接：https://blog.csdn.net/yexiguafu/article/details/109614510

版权

HDFS全方位实战专栏收录该内容

171 篇文章 147 订阅 ¥29.90 ¥99.00

订阅专栏

本文介绍了HDFS中的Trash功能，类似操作系统中的回收站，提供数据误删后的恢复可能。Trash功能默认关闭，需要通过配置`fs.trash.interval`和`fs.trash.checkpoint.interval`来启用。Trash目录包含`current`和以时间戳命名的checkpoint目录，每隔一定时间进行checkpoint并清理过期的checkpoint。源码分析显示，只有Active NameNode能执行Trash功能，通过`startTrashEmptier`启动清理线程，`Emptier`类的`run`方法实现定期清理。

摘要由CSDN通过智能技术生成

HDFS的trash有点类似于linux和windows中的垃圾箱，用户删除数据后并不会直接删掉，而是先放入垃圾箱中，如果用户误删除了数据，trash就给用户一个可以反悔的机会。

hdfs默认是不开启trash功能的，如果要开启trash功能，需要在core-site.xml中配置以下两个相关参数：

fs.trash.interval (默认值是0)
fs.trash.checkpoint.interval (默认值是0)

fs.trash.interval 配置项的意义如下：

多少分钟后删除checkpoint文件。如果是0，那么trash功能被禁用。

Number of minutes after which the checkpoint gets deleted. If zero, the trash feature is disabled. This option may be configured both on the server and the client. If trash is disabled server side then the client side configuration is checked. If trash is enabled on the server side then the value configured on the server is used and the client configuration value is ignored.

fs.trash.checkpoint.interval配置项的意义如下：

两次trash checkpoint之间的分钟间隔，这个值应该被设置为小于等于 fs.trash.interval的值。如果配置项为0，那么这个配置项的值会被设置为fs.trash.interval的值。 checkpointer线程每次运行的时候，

了解本专栏