【hdfs命令】 查看表的存储大小

查看表的大小通常的方法是hdfs dfs -du -h, 但统计的是子目录的大小,如:

hdfs dfs  -du -h /user/hive/warehouse/tmp.db/xxx
555.7 G  1.6 T    /user/hive/warehouse/tmp.db/xxx/data_date=20200610
556.2 G  1.6 T    /user/hive/warehouse/tmp.db/xxxt/data_date=20200611

其实我们需要统计当前目录的大小时可加入 -s ,如:

hdfs dfs  -du -s -h /user/hive/warehouse/tmp.db/xxxx/
26.9 G  80.7 G  /user/hive/warehouse/tmp.db/xxxx

当我们需要看文件是否小文件过多时,查看文件个数

hdfs dfs -count -h /user/hive/warehouse/tmp.db/xxxx 
3.6 K       62.9 K      353.5 G /user/hive/warehouse/tmp.db/xxxx 

分别代表:3.6k文件夹, 62.9k文件 以及总大小353.5 G

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值