Hadoop集群配置：启动hadoop出现没有resourcemanager

最新推荐文章于 2025-03-17 17:18:33 发布
最新推荐文章于 2025-03-17 17:18:33 发布
阅读量2.1w 收藏 49
点赞数 11
文章标签： hadoop 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_52596632/article/details/115693339
版权
这篇博客讲述了如何在Hadoop集群配置中遇到没有resourcemanager的问题，通过格式化HDFS并修复yarn-site.xml中的hostname为address，解决了资源管理器缺失的问题。关键在于理解XML配置文件中正确引用的重要性。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Hadoop集群配置：启动hadoop出现没有resourcemanager
首先要格式化一下
bin/hadoop namenode -format
格式化以后
格式化完成
启动Hadoop
在这里插入图片描述
启动完后用jps查看
发现没有resourcemanager这一项
于是打开logs
在这里插入图片描述

于是打开
hadoop-2.8.2/etc/hadoop目录下的yarn-site.xml

在这里插入图片描述
将其中的h.ostname改为address

在这里插入图片描述
成功解决
总结L:
xml里是根据name找value的 name不对它找不到有效的value值

Hadoop配置启动时jps没有namenode和secondaryname，，网上方法都试过了没有用
youhen921124的博客
03-20 2452
参考守护进程布局-->参考守护进程布局-->-- 指定 namenode 的 hdfs 协议文件系统的通信地址 -->--配置resourcemanager的scheduler的内部通讯地址-->--配置resourcemanager的web ui 的监控页面-->--配置resourcemanager的管理员的内部通讯地址-->--配置resoucemanager的资源调度的内部通讯地址-->--配置resourcemanager的内部通讯地址-->-- 指定resourcemanager的主机名-->
Hadoop ResourceManager :Error starting ResourceManager，Port in Use
fang.lovest.yang的博客
07-30 1035
问题 在fang1.fri.com启动yarn，yarn.site.xml配置的ResourceManage为fang2.fri.com,报错如下： fang1.fri.com fang2.fri.com fang3.fri.com NameNode ResourceManage DataNode DataNode D
解决集群部署Hadoop 启动后没有ResourceManager问题
qq_37354060的博客
03-18 1万+
解决集群部署Hadoop 启动后没有ResourceManager问题，java.lang.reflect.InaccessibleObjectException异常
hadoop三大模块学习和相关配置（hdfs、mapreduce、yarn）
最新发布
weixin_53033724的博客
03-17 981
包括登录root用户、修改IP和主机名、配置ssh免密登录、关闭防火墙、安装JDK、解压Hadoop安装包（该部分配置暂时未做记录，可以网上自行查找）例如：我的配置是：（总共三台服务器分别是： node1 node2 node3），node1为中心服务器，我是通过vmware虚拟机进行的操作，在window本地c盘下找到了hosts（C:\Windows\System32\drivers\etc） 把ip配置进去了。其余配置均为linux集群上的配置，可以上网搜索，都容易理解。HDFS的配置文件主要包括。
hadoop启动缺少NameNode， 缺少ResourceManager, 缺少NodeManager...
世幻水的博客
10-02 1万+
描述：在hadoop 运行start-all.sh，发现缺少了NameNode， 缺少ResourceManager, 缺少NodeManager…等等的服务。这类问题有统一的解决方案。即查阅hadoop日志。 目录 1.hadoop日志 2.1 没有NameNode(选读) 2.2 没有ResourceManager和NodeManager(选读) 2.3 没有ResourceManage(选读) 3. 总结 1.hadoop日志 hadoop日志位于 hadoop 安装目录下的logs里，包含
ResourceManager没启动
weixin_34233679的博客
11-03 819
终端看着没问题，然后进入hadoop的logs文件夹下找打yarn-hxsyl-resoucemanager.log，发现里面报错了，是因为fairscheduler需要放在etc/hadoop下，我把它放在了etc下，尴尬。...
启动hadoop后没有 NodeManager和 ResourceManager
z5z3c的博客
10-07 1921
跟着黑马网课学下去时发现我的hadoop启动后没有NodeManager和ResourceManager。
Hadoop集群 启动了之后， ResourceManager未起来的问题解决
热门推荐
学习、记录、分享
09-19 2万+
启动hadoop，在hadoop-2.5.2下开启集群hadoop-start.sh ，用jps查看进程， 1493 DataNode 1665 SecondaryNameNode 1400 NameNode 1903 NodeManager 2504 Jps 然后访问 http://ip:50070可以正常访问，端口8088访问不到，是因为你的ResourceManager在进程中没有打开，...
hadoop 集群监测_Hadoop集群监控：jmx信息获取
weixin_32251525的博客
12-31 1207
:8088/jmx即可获取一堆Jmx信息；同理，如果想获取NameNode的jmx可以输入:50070/jmx。/jmx这个URL是通过org.apache.hadoop.jmx.JMXJsonServlet类实现的。一般情况下所有使用HttpServer启动服务都可以访问http://.../jmx链接。这个Servlet仅仅提供了JMX metrics只读权限。为了方便，这里只介绍YARN的j...
Linux修改hadoop配置文件及启动hadoop集群详细步骤
m0_74830349的博客
09-22 5638
pwd。
hadoop- yarn启动后用jps查看没有resourcemanager
寂夜了无痕的博客
01-15 2505
hadoop- yarn启动后用jps查看没有resourcemanager
在启动hadoop高可用集群的时候ResourceManager服务进程未启动
bobobo02的博客
09-25 2362
缺少ResourceManager服务进程，最可能的原因是yarn-site.xml文件编写错误
启动hadoop没有resourcemanager_5.hadoop-MR YARN架构理论与集群搭建
weixin_39705018的博客
11-22 527
MR原语输入(格式化k,v)数据集map映射成一个中间数据集(k,v)reduce相同"的key为一组，调用一次reduce方法，方法内迭代这一组数据进行计算计算框架PartitionPartition主要作用就是将map的结果发送到相应的reduce。这就对partition有两个要求：1)均衡负载，尽量的将工作均匀的分配给不同的reduce。2)效率，分配速度一定要快。Shuffle：框架...
Hadoop HA 集群启动后没有Resourcemanager
youngboi的博客
03-07 1062
细心和分析问题同样重要。
Hadoop启动不了resource-manager
qq_43079328的博客
12-07 2295
最初打算搭建一个单节点伪分布式hadoop,参照网上一些参考后发现用yarn 启动resource-manager启动不起来。
Hadoop 生态系列之 Mapreduce
程序员小陶的大数据分享
04-21 303
阅读文本大概需要 5 分钟。文章稍长，建议收藏慢慢看。 目前 Hadoop 系列文章的规划就是这样，持续补充完善中… 同时可以访问 https://data.cuteximi.com Hadoop 生态系列之1.0和2.0架构 Hadoop 生态系列之 HDFS Hadoop 生态系列之 Mapreduce Hadoop 生态系列之 Yarn Hadoop 生态系列之 Zookeeper Hado...
Hadoop最新配置大全 没有ResourceManager， SecondaryNameNode， NameNode 怎么办？
lulu_930的博客
10-23 1725
很多朋友都会想亲自配置一下hadoop ，坑真多！！！ 首先，你先下载hadoop 我选的是2.1 链接：https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.10.1/hadoop-2.10.1.tar.gz 这个解压自己做昂，这里就不一一概述了 其次，你要有一个java 环境 链接：jdk-8u161-linux-x64.tar.gz 接下来就进入正题 编辑 yarn-site.xml 很关键，很关键！！！！
Hadoop启动缺失ResourceManager
小方块的博客
10-09 1776
hadoop
配置hadoop没有resourcemanager
05-02
如果你在配置 Hadoop 时没有启用 ResourceManager，那么你需要按照以下步骤进行配置： 1. 在 Hadoop 的配置文件中，找到 yarn-site.xml 文件。 2. 在 yarn-site.xml 文件中，将以下属性设置为 false： ``` <property> <name>yarn.resourcemanager.ha.enabled</name> <value>false</value> </property> ``` 3. 在 yarn-site.xml 文件中，找到以下属性： ``` <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value> </property> ``` 将其修改为： ``` <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle,spark_shuffle</value> </property> ``` 这将启用 Spark Shuffle 服务，以便让 Spark 应用程序在没有 ResourceManager 的情况下运行。 4. 将 Spark 配置文件中的 spark.master 属性设置为 yarn-client 或 yarn-cluster，具体取决于你的应用程序运行模式。 5. 启动 Spark 应用程序时，使用以下命令： ``` ./bin/spark-submit \ --class <main-class> --master yarn --deploy-mode client <application-jar> ``` 这将使用 YARN 作为 Spark 的资源管理器，并以客户端模式启动。 注意：这种配置方式并不是最佳实践，因为启用 ResourceManager 可以更好地管理资源和任务。如果可能的话，建议启用 ResourceManager。
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

阅阳楼记

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值