查看Hbase指定表所占空间

一、操作环境

  • ambari 2.4.3 + hdp 2.5.3 + hbase 1.1.2 + phoenix4.7 + kerberos + centos6.9

二、通过Hdfs 命令反推指定表所占空间大小
如查看T_PERSON_N对应的hbase表所占大小

[root@hdp14 ~]# hdfs dfs -du -h /apps/hbase/data/data/default/
215.9 G   /apps/hbase/data/data/default/T_PERSON_N

笔者备份数量为3份,因些该表实际占空间则为 3*215.9G=647.7G
该表4400万,每条数据63个字段,粗略算了下单条数据大概5K,算上备份则15K/条。

  • 如何确定 hdfs dfs -du -h /apps/hbase/data/data/default/ 算出来的所占空间没包含备份的呢?
    笔者是通过如下方式确认的:

执行如下命令算出总量

[root@hdp14 ~]# hdfs dfs -du -h /
433.5 M  /app-logs
842.3 G  /apps
87.3 M   /ats
658.2 M  /hdp
0        /mapred
1.2 M    /mr-history
21.5 G   /ranger
188.3 K  /spark-history
41.2 G   /tmp
44.0 M   /user
  • 大概加起来905G,备份系数为3,则共占用空间 905*3/1024 = 2.65T
  • 这时通过Ambari界面查看DFS大概使用了2.7TB,所以可以确定hdfs dfs -du算出来的空间大小是没有包含备份的
    Ambari界面结果如下所示:
    Disk Usage (DFS Used) 2.7 TB / 7.9 TB (33.68%)
  • 3
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值