hadoop namenode又一次格式化以后hbase的hmaster进程启动后立即消失

最新推荐文章于 2023-07-12 10:00:00 发布

weixin_33724059

最新推荐文章于 2023-07-12 10:00:00 发布

阅读量261

点赞数

文章标签：大数据

hadoop的 namenode又一次格式化以后。重新启动hbase。发现它的hmaster进程启动后立即消失，查看一大堆日志，最后在zookeeper的日志里发现例如以下问题

Unable to read additional data from client sessionid 0x14e86607c850007, likely client has closed socket

解决方法：删除掉hbase的hdfs-site.xml中一下内容所配置路径下的文件夹。重新启动zookeeper集群，再重新启动hbase让该文件夹又一次生成就可以

<property>
<name>hbase.zookeeper.property.dataDir</name>
<value>/home/lee/opt/zookeeper_data00</value>
</property>

关注博主即可阅读全文

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_33724059

关注关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

如何重新格式化Hadoop搭建的hbase环境

superXZT的博客

11-09

2486

背景：其实我之前已经搭建好hbase环境了，但是后来发现我的数据块丢失了，所以我不得不重新格式化整个集群【1】删除各个集群的Hadoop/tmp rm -r /home/michael/soft/hadoop/hadoop/tmp 【2】先用zkServer.sh start 启动各个zookeeper，再用hadoop-daemon.sh start journalnode启动各个N...

解决开启hbase后Hmaster过一会就消失问题

weixin_51705319的博客

06-02

2264

1.查看自己core-site.xml和hbase-site.xml 文件下的端口 hdfs默认端口为8020 在这里我修改为9000 所以在hbase-site.xml中也要为9000，之前我是写成8020 修改完重新运行hbase即可 2.时间未同步（查看虚拟机时间，如果未同步需修改）使用命令ntpdate ?u cn.pool.ntp.org（每一台都要）下面是我对其余xml的配置，以及一下启动，可作为参考： core-site.xml配置 <confi...

参与评论您还未登录，请先登录后发表或查看评论

解决问题：在格式化Hadoop之后无法使用HBase和Kafka

蔡政洁的博客

09-25

374

目录抛出问题：查找问题：解决问题：测试结果：抛出问题：在初学Hadoop的时候，由于自己手残，把Hadoop格式化了，结果导致很多数据丢失，hbase和kafka不能正常使用，如图所示：查找问题：于是我将hbase全部重新安装，结果还是不能解决。后来经过高人指点，找出了出现这种问题的原因：因为zookeeper上存储了hbase和kafka的元数据，hdfs存储了hbase数据本身，所以重新安装和格式化Hadoop没有作用解决问题：解决方案是，通过zookeeper的客户端命令，将hbase

hadoop namenode重新格式化以后hbase的hmaster进程启动后马上消失

dhtx_wzgl的博客

07-13

2922

hadoop的 namenode重新格式化以后，重启hbase，发现它的hmaster进程启动后马上消失，查看一大堆日志，最后在zookeeper的日志里发现如下问题 Unable to read additional data from client sessionid 0x14e86607c850007, likely client has closed socket 解决方法：删除掉h

强制格式化hadoop，清除HBase数据

ljz2173的博客

10-09

7617

自己配置的Hadoop+Hbase集群，之前正常运作，向集群中导入了120G的数据；隔了一段时间在此往里面导入数据，各种出错，最明显的就是某个节点的regionserver自动关闭，随之而来的就是其他节点也相继自动关闭，但HMaster运作正常。作为新手，日志看不懂，百度google不到问题所在，无奈之下，只能强制格式化hadoop，清除HBase数据，从零开始： 1、删除各个节点中hdfs目录

hadoop namenode节点格式化注意的问题以及对hbase的影响

cool__007的博客

02-18

4204

今天用hadoop的hdfs和Hbase时不知道怎么回事总是发生了崩溃，我最终试了重新格式化namenode节点的方式进行解决，但是重新格式化之后发生了一系列问题，不是namenode启动不了就是datanote启动不了。后来上网查询才知道格式化namenote需要注意一些事项： 1.重新格式化namenote相当于格式化元数据，会破坏整个集群数据，格式化前需考虑数据备份或者转移问题。 2.先

“格式化HDFS后，HMaster进程启动失败”的问题解决

热门推荐

Lucius的专栏

04-08

1万+

用 hadoop namenode -fromat 格式化后，用./start-hbase.sh 启动HMaster和HRegionServer，但是过几秒种后HMaster进程自动关闭，HRegionServer进程没有关闭，查看日志报如下错： 2015-04-08 10:49:12,164 INFO [worker01:16020.activeMasterManager] mas

linux关闭HQuorumPeer进程,全分布式HBase启动后HMaster和HRegionServer自动消失

weixin_34171095的博客

05-08

1589

我在三台主机上配置Hadoop 2.2.0和HBase 0.98.3(其自带的hadoop common的jar包就是2.2.0版本的)，一台机器为Debian 7.5, 机器名为psyDebian，运行namenode和datanode，另外两台为centos 6.5, 名字分别为centos1和centos2，运行datanode。Hadoop的hdfs运行良好，但在其基础上运行HBase时，...

Hbase HA搭建以及关于HRegionServer和HMaster进程无法启动的问题

qq_40076192的博客

10-04

2026

Hbase HA搭建以及关于HRegionServer和HMaster进程无法启动的问题在搭建Hbase HA的先决条件：环境介绍： a.Hadoop版本3.1.2，是的，没用2.x版本。 b.Hbase版本1.1.3 c.Zookeeper版本3.4.6 都是相对比较新的版本 1.我自己使用三台虚拟机模拟hadoop HA集群，在你自己的集群中，首先启动zookeeper（每台主机都要...

hbase中hmaster启动不起来

Saga

04-29

1万+

环境hadoop1.2.1 zookpeer3.4.5 前几个月装的hbase 当时还是基本可以使用的，装的版本是0.98.0，当初是考虑到它和hadoop1.2.1 是兼容的，不指导是配置的原因还是别的，端口访问60010时候老出错，但是hbase却还能使用建表查询等操作，最近一直在研究别的技术，也没好好折腾这玩意，今天终于想折腾一下了，却不知名的原因Hmaster启动不起来了,当时

hadoop -- Hbase

zhoushimiao1990的博客

07-12

1095

HBase是一个分布式、可扩展、面向列的数据存储（百万级别列）、可伸缩、高可靠性、实时读写的NoSQL 数据库。HBase利用 Hadoop的 HDFS作为其文件存储系统，利用MapReduce 来处理HBase中的海量数据，利用Zookeeper作为分布式协同服务。

hadoop格式化带来的后遗症

top_OMZ的博客

12-16

732

hadoop格式化

在搭建hadoop3.1.4分布式集群遇到集群启动时分节点datanode不启动且无日志的问题**

theoldy的博客

04-08

458

项目场景：在搭建hadoop3.x分布式集群遇到集群启动是分节点datanode不启动且无日志的问题问题描述：在搭建hadoop分布式集群是按照教程进行配置后，启动集群两个分节点的datanode都没有正常启动原因分析：，搜索相关问题后，删除tmp ，logs 格式化namenode依然启动不了，且分节点都没有日志信息。在经过多次搜索文章后，发现可能是hadoop目录下etc/hadoop/slaves的配置出了问题。但我的slaves文件是正确配置且分发到了其他两台主机，最后发现e

【HBase数据开发】集群搭建NameNode未格式化

大壮的博客

07-22

3934

1.报错如下 Encountered exception loading fsimage java.io.IOException: NameNode is not formatted. 上午10点28:19.302分 WARN FSNamesystem Encountered exception loading fsimage java.io.IOException: NameNode is not formatted. at org.apache.hadoop.hdfs.server.name

hadoop与hbase笔记与总结

u013244517的专栏

07-27

2753

hadoop_hbase的安装教程其中hadoop和hbase的配置文件有一点要说明 hadoop下的/etc/hadoop/core-site.xml fs.default.name hdfs://localhost:9000 与hbase下的conf/hbase-site.xml hbase.rootdir

(转)hadoop 常规错误问题(一)

weixin_34261739的博客

03-19

2473

转至：http://www.freeoa.net/osuport/db/my-hbase-usage-problem-sets_2979.html 本文是我在使用Hbase的过程碰到的一些问题和相应的解决方法，现将这些经过总结分析，以免日后忘记。hadoop新增节点hadoop集群要增加3个节点。在3台主机分别配置了host、与集群内所有机器的ssh登录互信、jdk1.7 等。所有配置、目录...

hadoop启动遇到的各种问题

weixin_34249678的博客

09-07

474

1. HDFS initialized but not 'healthy' yet, waiting... 这个日志会在启动hadoop的时候在JobTracker的log日志文件中出现，在这里就是hdfs出现问题，导致DataNode无法启动，这里唯一的解决方式就是把所有的NameNode管理的路径下的文件删除然后重新执行namenod...

实验3 熟悉常用的HBase操作

Alicia_LX的博客

10-26

1万+

一、实验目的理解HBase在Hadoop体系结构中的角色；熟练使用HBase操作常用的shell命令；熟悉HBase操作常用的Java API；二、实验平台操作系统：Linux； Hadoop版本：3.1.3； HBase版本：2.2.2； JDK版本：1.8； Java IDE：Eclipse。三、实验步骤（一）编程实现以下指定功能，并利用Hadoop提供的HBase Shell命令完成相同任务；列出HBase所有的表的相关新信息，例如表名； public sta.

namenode格式化的正确方式

qq_43148788的博客

05-31

5540

踩了不少坑，总结一下吧。 1、停掉所有节点 2、删除 data 数据和logs日志 3、开始格式化namenode节如果不删除数据和日志的话，重新格式化namenode会产生新的集群ID，这样会和datanode的集群ID产生冲突，导致namenode启动失败。还有就是注意如果出现namenode或者datanode把对方挤掉的情况，很可能是使用了root账户启动了节点，这时候应该切换到root账户查看进程，如果有的话，停止节点，删除数据和日志，问题差不多就解决了。 ...

hadoop和hbase启动后查看进程有多少个