hadoop和yarn都启动成功，hdfs的web页面可以访问，但yarn的web页面访问不了

最新推荐文章于 2024-03-13 00:39:03 发布
最新推荐文章于 2024-03-13 00:39:03 发布
阅读量2k 收藏 6
点赞数 1
文章标签： hadoop Powered by 金山文档
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_67656269/article/details/128561168
版权
文章讲述了在配置的Hadoop集群中，启动HDFS和YARN服务时需要注意的启动顺序。关键在于确定resourcemanager配置所在的节点，例如resourcemanager在hadoop-102上，所以HDFS应在hadoop-001启动，而YARN需在hadoop-002启动。验证启动成功的方法是使用jps命令检查resourcemanager进程，并能成功访问YARN的web界面。
摘要由CSDN通过智能技术生成

解决方法：

启动顺序问题，老狗了这个东西

先查看你配置的结点分布，看看你的resourcemanager节点配置在那个虚拟机

我的配置如下

显然我的resourcemanager节点配置在了hadoop-102上

所以启动hdfs要在hadoop-001上启动

而启动yarn平台的时候要在hadoop-002上启动

然后在hadoop-002上jps一下

有了resourcemanager

之后访问yarn的web节点成功

鸡哥爱技术
关注
hadoop在linux上启动成功了，但是浏览器访问不了
y15201653575的博客
04-03 1339
思考...........................................................处理...............................................................2.1.1、我根据操作步骤执行了，还是不行。2.1、根据网上的一些文章处理解决是关闭防火墙，2.2、开始怀疑是不是端口占用导致的。根据网上的资料进行安装hadoop的伪集群。2、但是在浏览器上确是怎么也访问不了，最后我把文件的端口号改成10000,
yarn 8088 页面无法打开：拒绝连接请求
热门推荐
four404的博客
05-24 1万+
前言：namenode, datanode, resourcemanager, nodemanager全部正常启动，但是无法打开web页面：http:// 本机IP :8088/cluster。 这个问题的解决，有两个思考方向： 1.本机与虚拟机网络连接问题：查看本机与虚拟机能否ping通，如果不通那就是虚拟机无法与外界通讯，常见的是虚拟机防火墙未关闭的原因。（如果是没有设置过虚拟机网络的，得去搜配置教程。。这个应该是在配置yarn之前早就解决的问题啦） <我的50070端口的web页面可以正常打开
常见错误:看不到Hadoop的页面
w15321970103的博客
06-08 1921
看不到集群的页面
眼泪汪汪，花了近10小时解决无法访问yarn管理界面的问题
JinxinTang2014的专栏
04-23 6410
各位看官，不管你们信或不信，昨天我从晚上6点一直搞到第二天凌晨2点，一直未解决一个问题，客户端浏览器那就是无法访问yarn管理界面，以及nodemanager会自动关闭等问题。hdfs 与 zk 都格式化了好多次，但终究没能解决！！！今天晚上又花了2小时终于解决了，眼泪汪汪啊。 好了，不卖关子了，其实出错就是因为centos 默认启动ipv6，而我没有注意到，一直在别的地方转啊转，找不到
Yarn Web页面 8088 端口在Windows浏览器无法访问
阿拉修
08-25 4865
问题描述 配置好Hadoop的Namenode节点、secondarynode节点和datanode节点之后，配置hadoop /etc目录下的mapred-site.xml、yarn-site.xml文件，配置完成之后，启动resourcemanager、nodemanager。其中，yarn-site.xml配置如下： <property> <name>yarn.nodemanager.aux-services</name>
hadoop yarn web无法访问
新的开始的专栏
10-11 6885
hadoop集群正常启动后，hdfs的web可以访问，但是yarn的web页面无法访问，查看yarn的日志，也是正常启动，没有异常日志，后来以为端口的问题，查看端口的时候，发现了不同： 8088对应的local Address是docker本身的ip，和50070对应的是不一样，然后在yarn-site.xml添加配置： <!--yarn总管理器的web http通讯地址--> <property> <name>yarn.resou...
hadoop yarn 历史服务器 web无法访问
weixin_45675904的博客
08-12 1667
hadoop yarn 历史服务器 web无法访问
解决配置完kerberos后，HDFS、YARN的web页面无法访问
不二先生的笔记
09-23 5400
HDFSWebUI浏览器认证 我们设置CDH支持kerberos后会出现下图所示的情况： 这是因为权限问题，按照下面的方式可完美解决 1.浏览器配置（Firefox） 1.打开火狐浏览器，在地址栏输入：about:config，进入设置页面。 2.搜索“network.negotiate-auth.trusted-uris”，修改值为自己的服务器主机名。 3搜索“network.auth.use-sspi”，双击将值变为false。 2安装kfw 1安装提...
hadoop:50070和yarn8088 web网页打不开
JavaBigData的博客
05-23 1039
hadoop:50070和yarn8088 web网页打不开 检查namenode和resourcemanager机器的防火墙 sudo service iptables status -若运行中，则需要关闭 sudo service iptables stop
解决HDFS YARN 页面访问失败
我是泛滥
02-26 903
防火墙 解决方案：关闭firewall：systemctl stop firewalld.service 拓展知识： 停止firewall（禁止firewall开机启动）：systemctl disable firewalld.service 查看默认防火墙状态（关闭后显示notrunning，开启后显示running）：firewall-cmd --state ...
启动Hadoop的HDFS提交一个Spark作业到YARN上运行
07-27
启动Hadoop的HDFS提交一个Spark作业到YARN上运行 路径和环境：确保HADOOP_HOME和SPARK_HOME变量设置正确，且Hadoop和Spark已正确安装和配置。 Spark作业：上述脚本中的Spark作业是Spark自带的Pi示例。你需要根据你的...
hadoop处理框架，hdfs，mapreduce，yarn
08-29
Hadoop 处理框架是大数据处理和分析的重要工具，主要由 HDFS、MapReduce 和 YARN 三个组件组成。HDFS 是一个分布式文件系统，提供高吞吐量的数据访问；MapReduce 是一个高效的计算方法，能够处理 PB 级乃至 ZB 级的...
记录hadoop HDFS与hadoop YARN无法访问问题
FunnyPrince_的博客
06-13 1726
问题： 如图，hadoop hdfs无法访问： 原因： 防火墙未关闭： 查看防火墙状态： [xiaobai@hadoop102 hadoop-3.2.2]$ systemctl status firewalld ● firewalld.service - firewalld - dynamic firewall daemon Loaded: loaded (/usr/lib/systemd/system/firewalld.service; enabled; vendor preset: enabl
启动hadoop集群（二）-启动hdfs和yarn
qq_20790447的博客
05-09 1288
启动3台虚拟机后，启动hadoop集群的方式。 #停止所有jps服务（该命令在hadoop2这台服务器上执行） $jps #如果只有Jps进程，则跳过停止进程的命令，否则执行。 $cd /opt/module/hadoop-2.7.2/ $sbin/stop-all.sh #删除三台虚拟机的VERSION [hadoop@hadoop102 hadoop-2.7.2]$ cd /opt/module/hadoop-2.7.2/data/abc/temp/dfs/data/current [hadoop@ha
hadoop之hdfs和yarn
coder_Gray的博客
03-19 1446
一.简介- 什么是hdfs？ hdfs是一种分布式系统，其组成是namenode节点和datanode节点。顾名思义，namenode是“名字节点”，存储的是这部分存储区域的相关信息，并管理datanode节点；而datanode存储的就是数据。一个namenode对应一个或多个datanode节点，每一个datanode运行在一台机器上，所以这些datanode组合到一起将形成一个集群（c
已经完全部署Hadoop，但是WebUI无法打开问题
weixin_54934346的博客
01-05 857
我的解决方法是，之前我的虚拟机浏览器加入了域名，把域名改成 Use system proxy settings 即可。查看三个虚拟机的jps都是正常运行，但是 输入master:50070无法打开页面。
对于yarn集群没有jobhistoryserver进程及yarn web网页没有任务信息
qq_65864042的博客
03-13 355
2.多次jps都有这个进程了，在虚拟机提交mapreduce任务 但网页没有任务信息，后面发现这是我mapred-site.xml文件出错了，在mapreduce.framework.name这一项中我的是vim.mapreduce.framework.name去掉vim.即可。3.提交mapreduce任务网页中有任务信息了，但显示失败，虚拟机中也报错root is not a leaf queve。按原来文件格式就好，我这排版错误，然后重启Hadoop，提交任务，问题解决。
hadoop集群配置好了在浏览器打不开是什么原因
maoting666的博客
10-06 1841
查看防火墙状态：systemctl status firewalld.service（如果没关在active中会显示running，我的就是）关闭防火墙：systemctl stop firewalld.service（关闭后再查看防火墙状态，active会显示dead）通过jps进程发现已经启动，但访问不了hdfs和yarn的网页。
Hadoop中使用Yarn对任务进行管理
theVicTory的博客
05-09 2780
本文对Yarn的组成结构、工作原理、常用命令和配置参数进行了简要介绍，之后重点记录了容量调度器和公平调度器的原理和使用方法。
hadoop中单独开启和关闭hdfs和yarn的指令
最新发布
09-14
在Hadoop集群中，HDFS (Hadoop Distributed File System) 和 YARN (Yet Another Resource Negotiator) 是两个独立的服务。如果你想要分别启动和停止它们，可以按照下面的操作： **启动HDFS:** ```sh $ hdfs namenode -format # 初始化HDFS命名空间（首次安装） $ start-dfs.sh 或 $ sbin/start-dfs.sh # 启动NameNode和DataNodes $ jps # 检查HDFS守护进程是否运行 **启动YARN:** $ bin/yarn-daemon.sh start resourcemanager # 启动ResourceManager $ bin/yarn-daemon.sh start nodemanager # 启动NodeManager $ jps # 检查YARN守护进程是否运行 ``` **关闭服务:** ```sh $ stop-yarn.sh 或 $ sbin/stop-yarn.sh # 停止YARN服务 $ stop-dfs.sh 或 $ sbin/stop-dfs.sh # 停止HDFS服务 ``` 请注意，这些命令通常是在Hadoop的bin目录下执行的，并且需要相应的权限。实际操作前，请确认你已经在Hadoop配置文件中设置了正确的环境变量和参数。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值