一 发现问题
当我们安装完毕hadoop后,输入jps,发现有NameNode,但是却没有DataNode。那么,为什么会出现这个问题呐?格式 化 NameNode,会产生新的集群 id,导致 NameNode 和 DataNode 的集群 id 不一致,集群找不到已往数据。如果集群在运行过程中报错,需要重新格式 化 NameNode 的话,一定要先停止 namenode 和 datanode 进程,并且要删 除所有机器的 data 和 logs 目录,然后再进行格式化。那么,我们只需要把NameNode和DataNode 的ID改为相同的就好了。
二 解决问题
如何去寻找NameNode和DataNode的ID呐? 我们要找到VERSION这个文件,在这个文件中进行修改。
我个人更习惯于在xshell中通过命令去查找VERSION这个文件,那接下来就通过xshell去查找吧!
首先,我们打开集群后,先找到你存放hadoop的文件夹中,我的存放到了module中,进入到hadoop-3.1.3/中(hadoop版本不一样,hadoop的后缀也不一样,这不碍事)

在这个目录下输入ls,然后进入到data,再输入ls,进入到data,输入ls,进入到dfs中(有的进入data中后,是tmp,那就输入ls,进入到df

在安装完Hadoop后,发现只有NameNode而没有DataNode进程。问题可能源于NameNode和DataNode的集群ID不一致。为解决此问题,需要找到并修改VERSION文件中的clusterID,确保它们相同。本文通过步骤指导如何查找并修改这两个ID,从而启动DataNode。
最低0.47元/天 解锁文章
6329

被折叠的 条评论
为什么被折叠?



