Hadoop 统计一个目录的文件大小

Hadoop 统计一个目录的文件大小

 

hive的查询注意事项以及优化总结 .

 http://www.cnblogs.com/xd502djj/p/3799432.html

Hadoop Hive基础sql语法

http://www.cnblogs.com/HondaHsu/p/4346354.html

map和reduce 个数的设定 （Hive优化）经典

http://blog.sina.com.cn/s/blog_9f48885501017dua.html

du

使用方法：hadoop fs -du URI [URI …]

指定目录时，显示该目录中所有文件的大小，

而当只指定一个文件时，只显示此文件的大小。
示例：
hadoop fs -du /user/hadoop/dir1
返回值：
成功返回0，失败返回-1。

dus

使用方法：hadoop fs -dus <args>

显示文件的大小

 

hadoop fs -du hdfs://ns1/user/mart_coo/app.db/app_store_flat_stock_flow_check_wmserp/dt=2016-01-31;

897167  hdfs://ns1/user/mart_coo/app.db/app_store_flat_stock_flow_check_wmserp/dt=2016-01-31/000000_0.lzo

893708  hdfs://ns1/user/mart_coo/app.db/app_store_flat_stock_flow_check_wmserp/dt=2016-01-31/000001_0.lzo