Hbase
Hbase
码农_程序员
大数据技术的熟练的运用,有海量数据架构的设计和优化经验
展开
-
Hbase实战问题(二)/hbase/WALs/id,端口,xxxxxxxx-splitting is non empty: Directory is not empty
hdfs、hbase的集群挂掉,查看hdfs日志org.apache.hadoop.fs.PathIsNotEmptyDirectoryException:/hbase/WALs/id,端口,xxxxxxxx-splitting is non empty: Directory is not empty原创 2022-06-26 07:58:09 · 881 阅读 · 0 评论 -
Hbase实战问题(一):清理Hbase的hdfs上archive目录
目录一、背景二、问题三、分析并解决一、背景 服务器的磁盘空间一直报警,查看hdfs已经占用了快满了,这时排查hdfs的各个目录占用空间,发现hbase占用很大# 查看hdfs根目录各文件夹占用空间hdfs dfs -du -h /查看hbase文件下的各个文件夹占用空间hdfs dfs -du -h /hbase二、问题 hdfs dfs -du -h /hbase/archive 占用很大三、分析并解决1、分析 ...原创 2022-01-05 18:46:40 · 3993 阅读 · 0 评论 -
Hadoop 2.5.2+hbase1.0.0+zookeeper 3.4.6 集群安装配置
HDFS采用master/slave架构,一个HDFS集群是由一个Namenode和一定数目的Datanodes组成。Namenode是一个中心服务器,负责管理文件系统的名字空间(namespace)以及客户端对文件的访问。集群中的Datanode一般是一个节点一个,负责管理它所在节点上的存储。HDFS暴露了文件系统的名字空间,用户能够以文件的形式在上面存储数据。从内部看,一个文件其实被原创 2016-11-05 12:45:12 · 2530 阅读 · 0 评论