启动yarn时,resourcemanager启动失败

问题描述

使用sbin/start-yarn.sh启动yarn后,再使用jps查看进程,发现只有Notemanager启动了,而resourcemanager没有启动。
代码如下所示:

[hadoop@hadoop-01 hadoop]$ sbin/start-yarn.sh
starting yarn daemons
starting resourcemanager, logging to /home/hadoop/app/hadoop-2.6.0-cdh5.10.0/logs/yarn-hadoop-resourcemanager-hadoop-01.out
hadoop-01: starting nodemanager, logging to /home/hadoop/app/hadoop-2.6.0-cdh5.10.0/logs/yarn-hadoop-nodemanager-hadoop-01.out
hadoop-02: starting nodemanager, logging to /home/hadoop/app/hadoop-2.6.0-cdh5.10.0/logs/yarn-hadoop-nodemanager-hadoop-02.out
hadoop-03: starting nodemanager, logging to /home/hadoop/app/hadoop-2.6.0-cdh5.10.0/logs/yarn-hadoop-nodemanager-hadoop-03.out
[hadoop@hadoop-01 hadoop]$ jps
15824 Jps
2241 QuorumPeerMain
13461 NameNode
14054 DFSZKFailoverController
13575 DataNode
13771 JournalNode
15691 NodeManager


原因分析:

先查看日志文件,启动resourcemanager的日志文件的位置如下图红框所示,将后缀.out改为.log就是日志文件。
日志

#查看日志
cat /home/hadoop/app/hadoop-2.6.0-cdh5.10.0/logs/yarn-hadoop-resourcemanager-hadoop-01.log

错误

在日志中发现错误原因是:yarn.resourcemanager.zk-address is not set,问题应该是在yarn的配置文件中没有找到yarn.resourcemanager.zk-address

解决方案:

打开yarn的配置文件yarn-site.xml,找到如下图所示的配置段:
配置文件
hadoop.zk.address改为yarn.resourcemanager.zk-address
随后重新启动yarn,发现resourcemanager进程已经存在。
问题解决

  • 3
    点赞
  • 15
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
在使用Ambari来部署Hadoop集群,以下是Hadoop组件启动的一般顺序: 1. ZooKeeper:ZooKeeper是一个分布式协调服务,在Hadoop集群中用于管理和协调其他组件。首先,启动ZooKeeper服务。 2. HDFSHadoop Distributed File System):HDFSHadoop的分布式文件系统。按照以下顺序启动HDFS组件: - NameNode:启动NameNode服务,它是HDFS的主节点,负责管理文件系统的命名空间和元数据。 - SecondaryNameNode(可选):如果使用SecondaryNameNode组件,启动SecondaryNameNode服务,它负责定期合并NameNode的编辑日志并创建检查点。 - DataNode:启动DataNode服务,DataNode是HDFS的数据节点,负责存储实际的文件数据。 3. YARN(Yet Another Resource Negotiator):YARNHadoop的资源管理器,用于管理集群资源和任务调度。按照以下顺序启动YARN组件: - ResourceManager启动ResourceManager服务,它是YARN的主节点,负责整个集群的资源管理和作业调度。 - NodeManager启动NodeManager服务,NodeManager运行在每个节点上,负责管理该节点上的资源和任务。 4. MapReduce历史服务器(可选):如果使用MapReduce历史服务器组件,可以启动它来查看旧的MapReduce作业历史信息。 5. Hive Metastore服务(可选):如果使用Hive,启动Hive Metastore服务,它是Hive的元数据存储。 6. Spark历史服务器(可选):如果使用Spark,可以启动Spark历史服务器来查看Spark应用程序的历史信息。 请注意,以上是一般情况下的启动顺序,并且可能会因特定的配置或需求而有所不同。在启动之前,请确保相关的配置文件已正确设置,并且网络连接正常。启动过程中,可以查看Ambari界面或相应的日志文件来检查是否有任何错误或异常情况。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值