Hbase在HDFS上的目录说明

hbase安装在ubuntu虚拟机上,分配了20G的硬盘,但是数据保存到3千万的时候就报错说打不开文件了。机器重启之后报错说没有空间了。可是之前查看的时候数据才1.5G,为了弄清楚问题,了解了一下hbase的保存。

大部分空间被archive这个文件夹占用了,顺便了解一下所有文件夹的作用

1./.tmp
这个目录用来存储临时文件,当对表进行操作的时候,首先会将表移动到该目录下,然后再进行操作。

2./MasterProcWALs

暂时没找到具体的说明

3./WALs

被HLog实例管理的WAL文件。

4./archive

存储表的归档和快照,HBase 在做 Split或者 compact 操作完成之后,会将 HFile 移到archive 目录中,然后将之前的 hfile 删除掉,该目录由 HMaster 上的一个定时任务定期去清理。

5./corrupt

存储HBase做损坏的日志文件,一般都是为空的。

6./data

hbase 的核心目录,系统会预置两个 namespace 即:hbase和default。/data/hbase 存储了存储了 HBase 的 namespace、meta 两个系统级表。namespace 中存储了 HBase 中的所有 namespace 信息,包括预置的hbase 和 default。/data/default/ 存储所有用户数据表/data/default/表名。

7./hbase.id

存储集群唯一的 cluster id 号,是一个 uuid。

8./hbase.version

同样也是一个文件,存储集群的版本号,貌似是加密的,看不到,只能通过web-ui 才能正确显示出来。

9./oldWALs

当/WALs 中的HLog文件被持久化到存储文件中,不再需要日志文件时,它们会被移动到/oldWALs目录。

转载:https://www.jianshu.com/p/f82aafd7b381

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值