rainysia的专栏

Let it go

理解Hadoop HDFS的配额和fs, fsck工具

hadoop 使用HDFS来落地存储hbase的数据, 我们可以通过以下命令来查看HDFS的空间占用大小. hadoop fsck hadoop fs -dus hadoop fs -count -q 上述命令在hdfs里面可能存在权限问题, 可以前面加上sudo -u hdfs 来运行...

2016-05-02 11:01:02

阅读数:3308

评论数:0

HUE配置zookeeper,HDFS报错Failed to access filesystem root解决

在运行HUE的时候, webhdfs进入总会报错, Failed to access filesystem root我是在集群的三个server(namenode, node1, node2)里面,选的压力最小的一个namenode跑的docker的HUE版本. 版本号3.9ssh nameno...

2016-04-12 18:00:01

阅读数:4694

评论数:2

HBase落地到HDFS后磁盘空间急剧增长的解决.

场景 用flume+hbase thrift朝HBase插入了大约2亿行服务器的日志数据, 在用hbase org.apache.hadoop.hbase.mapreduce.Export 的时候, 发现出现了大量的ScannerTimeoutException, 于是ctrl+c取消了落地到H...

2016-04-01 14:58:44

阅读数:4280

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭