Hadoop安装常见bug
Hadoop项目进行安装学习时,常见的bug
问题描述
提示:这里描述项目中遇到的问题:
安装完成后,使用jps指令发现没有NodeManger进程。
at org.apache.hadoop.yarn.server.nodemanager.containermanager.localizer.ResourceLocalizationService.checkLocalDir(ResourceLocalizationService.java:1562)
at org.apache.hadoop.yarn.server.nodemanager.containermanager.localizer.ResourceLocalizationService.checkAndInitializeLocalDirs(ResourceLocalizationService.java:1530)
at org.apache.hadoop.yarn.server.nodemanager.containermanager.localizer.ResourceLocalizationService$1.onDirsChanged(ResourceLocalizationService.java:271)
at org.apache.hadoop.yarn.server.nodemanager.DirectoryCollection.registerDirsChangeListener(DirectoryCollection.java:197)
at org.apache.hadoop.yarn.server.nodemanager.LocalDirsHandlerService.registerLocalDirsChangeListener(LocalDirsHandlerService.java:242)
at org.apache.hadoop.yarn.server.nodemanager.containermanager.localizer.ResourceLocalizationService.serviceStart(ResourceLocalizationService.java:372)
at org.apache.hadoop.service.AbstractService.start(AbstractService.java:193)
at org.apache.hadoop.service.CompositeService.serviceStart(CompositeService.java:120)
at org.apache.hadoop.yarn.server.nodemanager.containermanager.ContainerManagerImpl.serviceStart(ContainerManagerImpl.java:502)
at org.apache.hadoop.service.AbstractService.start(AbstractService.java:193)
at org.apache.hadoop.service.CompositeService.serviceStart(CompositeService.java:120)
at org.apache.hadoop.yarn.server.nodemanager.NodeManager.serviceStart(NodeManager.java:369)
at org.apache.hadoop.service.AbstractService.start(AbstractService.java:193)
at org.apache.hadoop.yarn.server.nodemanager.NodeManager.initAndStartNodeManager(NodeManager.java:637)
at org.apache.hadoop.yarn.server.nodemanager.NodeManager.main(NodeManager.java:684)
原因分析:
提示:这里填写问题的分析:.YarnRuntimeException: Permissions incorrectly set for dir /tmp/hadoop-76849/nm-local-dir/nmPrivate, should be rwx------, actual value = rwxrwx—:
显然从这里可以看出,权限不够的问题,因此此时我们需要进行提高权限,但是修改权限又要进行指令操作。
此时在这里最好使用管理员方式进行运行,可以节省对权限的修改。
解决方案:
提示:这里填写该问题的具体解决方案:
1:打开管理员命令窗口进行操做,
2:输入指令 cd E:\hadoop-2.8.3\sbin
E:\hadoop-2.8.3\sbin>start-all
3:使用jps指令查看正在运行进程,可以看到存在NodeManger进程。
既可以得到如图所示: