【大数据基础】Resourcemanager和NodeManagers启动失败

【错误描述1】

启动hadoop后没有resourcenamager和nodemanagers节点

【解决方案】

可能是JDK版过高,过高的JDK版本默认禁止访问许多javax的API导致hadoop启动失败;

建议下载jdk1.8   Java Archive Downloads - Java SE 8


【错误描述2】

启动Hadoop时出现Error;

ERROR: node02:Cannot set priority of resourcemanager process on  xxxx 

【解决方案】

hadoop用户设置错误;

可将HADOOP_HOME/etc/hadoop/hadoop-env.sh文件中添加一下代码;

export HDFS_NAMENODE_USER=root
export HDFS_DATANODE_USER=root
export HDFS_SECONDARYNAMENODE_USER=root
export YARN_RESOURCEMANAGER_USER=root
export YARN_NODEMANAGER_USER=root
export JAVA_HOME=/export/servers/jdk/     //此处为JDK的文件路径
export HDFS_JOURNALNODE_USER=root
export HDFS_ZKFC_USER=root
export HADOOP_SHELL_EXECNAME=root

启动YARN后如果没有显示ResourceManagerNodeManagersDataNode,可能存在以下几种原因: 1. **配置文件错误**: - 检查YARN的配置文件(`yarn-site.xml`)HDFS的配置文件(`hdfs-site.xml`)是否正确配置。确保`ResourceManager`、`NodeManager``DataNode`的相关配置项正确无误。 2. **防火墙或端口问题**: - 确保防火墙没有阻止YARNHDFS使用的端口。默认情况下,`ResourceManager`使用8088端口,`NodeManager`使用8042端口,`DataNode`使用50010端口。可以使用`netstat -tuln`命令检查这些端口是否被占用。 3. **日志文件**: - 查看YARNHDFS的日志文件(通常在`$HADOOP_HOME/logs`目录下)以获取详细的错误信息。日志文件中可能包含启动失败的详细原因。 4. **进程未启动**: - 使用`jps`命令检查`ResourceManager`、`NodeManager``DataNode`的进程是否已经启动。如果没有启动,可以尝试手动启动这些进程: ```bash $HADOOP_HOME/sbin/yarn-daemon.sh start resourcemanager $HADOOP_HOME/sbin/yarn-daemon.sh start nodemanager $HADOOP_HOME/sbin/hadoop-daemon.sh start datanode ``` 5. **环境变量**: - 确保HadoopYARN的环境变量正确设置,特别是`HADOOP_HOME`、`HADOOP_CONF_DIR``YARN_CONF_DIR`。 6. **版本兼容性问题**: - 确保HadoopYARN的版本兼容,并且所有节点上的版本一致。 通过以上步骤,可以逐步排查启动YARN后没有显示ResourceManagerNodeManagersDataNode的问题。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值