在手动清楚了hdfs上的一些坏块以后导致启动hbase master报错

最新推荐文章于 2024-04-23 23:44:56 发布
最新推荐文章于 2024-04-23 23:44:56 发布
阅读量3.7k 收藏
点赞数
分类专栏： Hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kiwi_kid/article/details/54016460
版权
在手动清楚了hdfs上的一些坏块以后导致启动hbase master报错

查看hbase的报警日志

2017-01-04 10:03:14,164 FATAL [kiwi02:60000.activeMasterManager] master.HMaster: Unhandled exception. Starting shutdown.
org.apache.hadoop.hbase.util.FileSystemVersionException: HBase file layout needs to be upgraded. You have version null and I want version 8. Consult http://hbase.apache.org/book.html for further information about upgrading HBase. Is your hbase.rootdir valid? If so, you may need to run 'hbase hbck -fixVersionFile'.


初步怀疑，是hdfs中，删除坏块导致了hbase的配置文件有损坏
在hdfs中，删除hbase的目录，重启hbase master 问题解除
bigclouder
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
记一次hbase删除表失败后导致hbase master挂掉并启动不来
weixin_42838158的博客
11-14 987
hbase删除表，失败后导致hbase master启动不来的问题 在hbase shell中执行 disable ‘Tag_data_backups’ 然后执行drop ‘Tag_data_backups’ 卡了很久，一直到失败，并导致hbase master挂了，并且启动失败。 hbase master报错如下： Failed to archive class org.apache.hadoo...
[Hbase错误]-----删除DataNode的坏块后，启动Hbase报错找不到hbase.version文件
u011250186的博客
08-11 336
[Hbase错误]-----删除DataNode的坏块后，启动Hbase报错找不到hbase.version文件
分布式hbase：status查看hbase shell时抱错：ERROR: KeeperErrorCode = NoNode for /hbase/master 问题。
最新发布
2401_83508498的博客
04-23 1503
master节点start-hbase.sh启动hbase后，jps命令查看启动进程可以看到，但是总是过十几秒就直接停止了，再输出jps命令无法查看到。进入shell界面,输出status命令查看hbase运行状态时抱错：ERROR: KeeperErrorCode = NoNode for /hbase/master 问题。抱错原因：1./etc/hosts是否配置节点和IP地址对应。2.没有关闭主节点和从节点的安全模式。3.hbase的hbase-site.xml配置文件有误。
HBase删除HFile文件Region无法上线处理
gavin_g_feng的博客
06-25 611
HBase删除HFile文件Region无法上线处理 1、背景 HBase集群底层hdfs文件出现坏块无法恢复，删除了底层hdfs坏块文件HFile文件后，region无法上线。 2、问题排查 找到hbase 无法上线的region，在hbase shell中进行assign 'regionId'，查看hbase主节点日志，找到该region分配的regionserver服务 查看regionserver服务的hbase日志，分析原因，发现部分文件找不到。找到文件不存在的region所在的r
重建hdfs后，Hbase无法使用
Cyclist's sightseeing
09-07 1287
 原因分析： 重建hdfs后，Hbase注册到原hdfs的信息被清除，而zookeeper仍保留了Hbase的旧的注册信息。 导致在新的hdfs找不到原来的Hbase信息而报错。 解决方案： 将zookeeper注册的旧的Hbase信息清除，重新启动Hbase服务。 2月 21, 凌晨5点23:59.125 FATAL org.apache....
hbase和hadoop数据块损坏处理
11-05
HDFS 坏块数据的处理通常是由挂了两台以上的机器导致的。因此，需要检查集群机器是否挂了多台，然后检查 HDFS 状态。如果不健康，需要确定有损坏的块，列出损坏块，然后删除全部的损坏块。最后，需要重启 HBase 集群...
Hadoop_HDFS_HBase在centos上部署
04-15
在本文中，我们将深入探讨如何在CentOS操作系统上部署Hadoop HDFS和HBase。首先，我们来看一下Hadoop的部署过程。 ### 一、部署Hadoop #### 1. 安装Hadoop 3.1.3 安装Hadoop需要先确保你的系统满足其依赖项，比如...
大数据 hdfs hadoop hbase jmeter
10-23
在IT行业中，大数据处理是当前的关键技术之一，而Hadoop、HDFS和HBase则是其中的核心组件。Hadoop是一个开源框架，主要用于存储和处理大规模数据，而HDFS（Hadoop Distributed File System）是Hadoop的核心部分，是...
java操作Hbase之从Hbase中读取数据写入hdfs中源码
01-17
在Java编程环境中，操作HBase并将其数据写入HDFS（Hadoop Distributed File System）是一项常见的任务，特别是在大数据处理和分析的场景下。本篇将详细介绍如何使用Java API实现这一功能，以及涉及到的关键技术和...
HDFS+MapReduce+Hive+HBase十分钟快速入门.zip_hbase_hdfs_hive_mapReduce
09-24
在大数据处理领域，Hadoop生态系统中的HDFS（Hadoop Distributed File System）、MapReduce、Hive和HBase是四个至关重要的组件。本资料“HDFS+MapReduce+Hive+HBase十分钟快速入门”旨在帮助初学者迅速理解这些技术...
hdfs块丢失导致hbase部分数据获取异常
u010316405的专栏
07-17 1368
hdfs块丢失导致hbase部分数据获取异常 Hbase获取数据异常：org.apache.hadoop.hbase.client.RetriesExhaustedException: Can’t get the locations 检查hbase regionserver日志无明显异常； 查看hbase table region 发现莫名多出了两个region（预分区200个region）...
hdfs块丢失导致的异常问题排查解决
热门推荐
u010316405的专栏
05-27 1万+
问题描述：由于不小心误删了hdfs的元数据目录，导致hdfs的块丢失；hdfs namenode自动进入 safe mode，hbase也一直报错找不到hbase.version文件，导致master挂掉； 1、首先退出hdfs namenode safe mode     hadoop dfsadmin -safemode leave 2、修复hdfs丢失的块   hadoop fs
Hbase异常处理
乔克叔叔
03-29 3319
1.No lease on file (inode 5425306): File does not exist. [Lease. Holder: DFSClient_NONMAPREDUCE_-247167534_42, pendingcreates: 1] org.apache.hadoop.ipc.RemoteException: No lease on /user/test/xxx/cc...
[解决方案]org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block
weixin_45212094的博客
04-14 6000
[解决方案]org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block...报错情况查看受损block有可能当前路径下的受损block不止一个删除损坏的block 报错情况 Caused by: java.io.IOException: org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block: xxxxxxxxxxxxxxxxxxxx file=/p
HDFS报错--org.apache.hdfs.BlockMissingException
never_compromise2580的博客
05-04 8590
#问题：访问HDFS文件的时候报错org.apache.hdfs.BlockMissingException#问题分析：目前博主遇到的问题有两种一：问题分析A：存放指定块的DateNode进程都死了，客户端的请求没有响应肯定获取不到HDFS块#解决办法：首先可以在yarn的管理界面上查看集群的状况，那些Datenode节点死了。然后去对应的主机把进程起起来下面是博主自己的本机的环境，供参考B：遇到...
Hadoop集群报BlockMissing错误
qq_45289871的博客
05-12 793
Hadoop报Blocks Missing Exception
HBase异常之---删除hdfs一些损坏的block块后，HBase启动报错not find hbase.version
小夜丶凝眸的博客
11-07 1196
由于hdfs的一些数据丢失，block块损坏，执行了hdfs fsck / -delete 来清除损坏块，之后重启HBase服务后发现启动异常，日志报错: HBase file layout needs to be upgraded. You have version null and I want version 8. Consult http://hbase.apache.org/book....
hadoop之hdfs生产数据块损坏修复方法
luo981695830的博客
11-28 3463
hadoop之hdfs生产数据块损坏修复方法
core-site.xml hdfs://master:8020 hbase-rootdir hdfs://master:9000/hbase 这两个配置是什么意思
03-05
其中，core-site.xml 中的 hdfs://master:802 表示 Hadoop 文件系统的地址为 master 节点的 802 端口，hbase-rootdir 中的 hdfs://master:900/hbase 则表示 HBase 数据存储的根目录为 Hadoop 文件系统中的 /hbase ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值