hadoop 2.8.3 UnregisteredNodeException

最新推荐文章于 2020-07-03 03:26:01 发布
最新推荐文章于 2020-07-03 03:26:01 发布
阅读量420 收藏
点赞数 1
分类专栏： hadoop 文章标签： hadoop UnregisteredNodeException
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xinghe_wang/article/details/79841814
版权
在完成Hadoop集群搭建后，尝试动态添加节点时，发现新节点仅显示NodeManager而无DataNode。通过日志分析，问题出在datanodeUuid重复，解决方案是停止集群，删除新节点的hdfs下datanode文件夹，再重启集群。
摘要由CSDN通过智能技术生成

起因：hadoop 已经集群完毕，想测试动态添加节点，然后直接克隆已有的节点虚拟系统作为新节点。
现象：使用jps 之后发现只有NodeManager 并没有发现DataNode.
排查：重新启动集群，现象还是一样，排除动态节点添加，然后打开master日志（logs/hadoop-username-namenode-hadoop-master.log）发现一下错误:

org.apache.hadoop.hdfs.protocol.UnregisteredNodeException: Data node DatanodeRegistration(192.168.128.134:50010, datanodeUuid=8ed33ae6-bd0b-4031-9e1c-6390d2f431a0, infoPort=50075, infoSecurePort=0, ipcPort=50020, storageInfo=lv=-
最低0.47元/天 解锁文章
xinghe_wang
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
org.apache.hadoop.hdfs.protocol.UnregisteredDatanodeException
....
10-23 2237
最近博主在做hadoop多机分布式集群的时候，主要用了三台服务器，server1 ，server2，server3. 在linux下通过jps命令查看几台服务器的进程 正常情况下 server1 的进程中应该含有(NameNode、SecondaryNameNode、JobTracker、DataNode、TaskTracker) 这5个进程. Server2的进程中应该含有(DataN
org.apache.hadoop.hdfs.protocol.UnregisteredNodeException
weixin_30600503的博客
06-06 327
datanode启动之后，一直在汇报本机的状态信息，但是无法注册成功。经检查是 三个datanode的 datanodeUuid 一样。检查命令如下： cat /export/data/hdp/dfs/data/current/VERSION 解决：3个datanode中，删除掉2个一样的，保留一个即可。然后重新启动即可。hadoop-daemon.sh start datanode 转载于:h...
Datanode没起来，报错RemoteException(org.apache.hadoop.hdfs.protocol.UnregisteredNodeException)的解决方案...
weixin_34167043的博客
07-14 227
2019独角兽企业重金招聘Python工程师标准>>> ...
从节点datanode启动报错：RemoteException(org.apache.hadoop.hdfs.protocol.UnregisteredNodeException): 993
Bolong_的博客
04-22 612
启动hadoop日常报错，今天是两台datanode只启动了一台，查看日志文件：WARN org.apache.hadoop.hdfs.server.datanode.DataNode: Block pool BP-406105891-192.168.31.129-1524063772 org.apache.hadoop.ipc.RemoteException(org.apache.hadoop....
hadoop启动异常：UnregisteredDatanodeException
12-09 2544
启动Hadoop集群时，发现三台DataNode只启动成功了两台，未启动成功的那一台日志中出现了下列异常：  2012-09-07 23:58:51,240 WARN org.apache.hadoop.hdfs.server.datanode.DataNode: DataNode is shutting down: org.apache.hadoop.ipc.RemoteException:
hadoop2.8.3
10-12
Hadoop 2.8.3 是一个开源框架，主要用于分布式存储和处理大数据。这个版本的Hadoop在Windows 10 64位操作系统上也可以安装和运行，这为开发者和数据分析师提供了在本地环境中测试和开发Hadoop应用程序的便利。 在...
hadoop2.8.3包含winutils.exe和hadoop.dll
04-18
Hadoop2.8.3是这个开源项目的一个稳定版本，提供了许多性能改进和新特性。 在Hadoop的Windows环境下，有两个关键的组件涉及到在Windows系统上的运行：winutils.exe和hadoop.dll。它们是Hadoop在Windows平台上的特定...
hadoop2.8.3 for windows7
03-01
在win7上运行hadoop出现问题，可以将该压缩包解压之后，覆盖原始hadoop2.8.3版本的bin目录。即可解决不能运行问题。
linux下编译hadoop2.8.3，附教程、maven库、所需工具（1）
12-21
这是我自己编译整理的，现在分享给大家，包含编译好的hadoop2.8.3、编译教程、jdk、下载好的maven仓库、编译使用的所有安装包和编译注意问题。 希望对大家有所帮助，ps：上传文件居然还有限制，每次只能120m，坑爹啊...
hadoop-2.8.3-winutils
03-26
hadoop 2.8.3 winutils, 测试过可以使用，分享在这里，供大家方便使用，谢谢！
hadoop-2.8.3
01-03
hadoop-2.8.3版本hadoop-2.8.3版本hadoop-2.8.3版本hadoop-2.8.3版本
hadoop-eclipse-plugin-2.8.3.jar
12-25
hadoop2.8.3的eclipse插件，eclipse版本是mars，亲测可用。如果遇到这个错误：An internal error occurred during: "Map/Reduce location status updater"不是插件问题，请执行命令：hadoop dfs -mkdir /用户名。
Hadoop启动异常：UnregisteredDatanodeException
没有名称
09-08 166
启动Hadoop集群测试HBase时候，发现三台DataNode只启动成功了两台，未启动成功的那一台日志中出现了下列异常：  写道 2012-09-07 23:58:51,240 WARN org.apache.hadoop.hdfs.server.datanode.DataNode: DataNode is shutting down: org.apache.hadoop.ipc.Re...
各个datanode的storageID不一样，导致启动datanode不成功。
tbdp6411的专栏
04-24 3127
我们在启动hadoop各个节点时，启动namenode和datanode，这个时候如果
org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.protocol.UnregisteredNodeException)
qq_30657195的博客
07-25 3312
今天重新部署了一个3个节点的hadoop完全分布式集群，在第一台节点上安装好hadoop后，使用了伪分布式模式对集群进行了上传文件操作，运行了wordcount案例。在进行完全分布式时，发现有个节点无法启动，查看该节点的 .log文件，发现在文件最后抛出了以下错误。仔细回顾操作过程后，这一系列操作是属于往集群中添加节点。于是，我关闭了集群，并在namenode节点的etc/hadoop目录下添加了...
Hadoop启动时datanode启动失败
qq_37618154的博客
07-03 994
1. Incompatible clusterIDs hadoop的data-node在它的版本文件里存储一个永久性的clusterID，当datanode启动时会检查并匹配namenode的版本文件里的clusterID，如果两者不匹配，就会出现"Incompatible clusterIDs"的异常。 　　每次格式化namenode都会生成一个新的clusterID, 如果只格式化了namenode，没有格式化此datanode， 就会出现”java.io.IOException: Incompatib
hadoop 2.8.3 eclipse 插件
fxnfk
12-25 5875
hadoop eclipse plugin 插件 hadoop2.8.3 版本 hadoop-eclipse-plugin-2.8.3.jar eclispe mars oxygen jee
跟我一起读《Hadoop权威指南》 第一篇 -- Hadoop2.8.3安装
maniacer的博客
04-26 4064
我的配置环境 我的是mac环境，centos/ubuntu等环境通用 安装首先需要安装jdk1.8、maven3.5.3、protoc（必须是2.5，下载地址：protoc2.5）。 这里的maven和protoc是为以后的重新编译Hadoop-src源码做准备，本文暂且使用不到 下载完成后，解压到本地目录 vi ~/.bash_profile，忽略这里的HADOOP_HOME，下边才会配置...
hadoop2.8.3镜像
最新发布
11-04
根据提供的引用，可以得知hadoop2.8.0的下载链接。而hadoop2.8.3并不是一个镜像，而是hadoop的一个版本。Hadoop是一个开源的分布式计算平台，它可以处理大规模数据集的存储和处理。Hadoop 2.8.3是Hadoop 2.x系列的一个版本，它包含了许多新的特性和改进，例如支持更多的文件系统、更好的容错性和更高的性能等等。如果你想使用Hadoop 2.8.3，你可以通过引用下载它，并按照官方文档进行安装和配置。根据引用，你可以修改yarn-site.xml文件来配置YARN（Hadoop的资源管理器）的相关参数。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值