hadoop 50030,8088,8042端口不能访问

最新推荐文章于 2024-04-12 16:32:03 发布
最新推荐文章于 2024-04-12 16:32:03 发布
阅读量1w 收藏 2
点赞数
分类专栏： 云计算 文章标签： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xypds2010/article/details/47335961
版权

hadoop报错：org.apache.hadoop.yarn.exceptions.YarnRuntimeException: java.lang.IllegalArgumentException: 

Does not contain a valid host:port authority:  master:8034 (configuration property 'yarn.resourcemanager.resource-tracker.address')


郁闷了半天，经查，是yarn-site.xml配置时出错，

<property>


<name>yarn.resourcemanager.admin.address</name>


<value>master:8033</value>


</property>

master前面不能有空格，否则就会报上面的错误。

诸葛明亮
关注
专栏目录
Hadoop集群无法访问 50070 和 8088 问题排查思路
smdforever的博客
01-30 1963
问题描述：Hadoop启动集群，无法访问 50070 和 8088端口 前提 Version: 2.7.5 CentOS 6.6 1个master，3个slave，互相 ping 通，cmd 可以 ping 通。 如果上述尚未实现，建议按照如下步骤排查： 配置IP地址 ，前三位要与本机IP地址一致，vi /etc/sysconfig/network-scripts/ifcfg-eth0，执行网卡启动，ifup eth0 配置hostname及网关，vi /etc/sysconfig/network，如果
Hadoop数仓中常用端口详解:(第36天)
最新发布
syhiiu的博客
07-15 2545
在数仓（数据仓库）开发中，不同的组件和服务会使用不同的端口号进行通信。由于数仓的实现可能依赖于多种技术和框架（如Hadoop、Hive、HBase、Spark等），因此涉及的端口号也会有所不同。以下是一些数仓开发中常用端口号及其作用的概述，以及相关的操作指令建议。常用端口号及其作用。
Hadoop集群工作台查看日志报错问题及解决办法
Jameslvt的博客
08-13 5342
我们在hadoop集群一般需要在工作台查看日志，但是工作台查看日志一般会出现以下情况： 上面的原因是由于yarn的日志监控功能默认是处于关闭状态的，需要我们进行开启，开启步骤如下： 一、在yarn-site.xml文件中添加日志监控支持 该配置中添加下面的配置： &lt;!-- 开启日志聚合 --&gt; &lt;property&gt; ...
Hortonworks Nodemanager启动但失败：连接拒绝：8042 解决方法
云计算大数据
09-03 4790
问题描述： Connection failed to http://10.171.31.40:8042/ws/v1/node/info (Traceback (most recent call last): File "/var/lib/ambari-agent/cache/stacks/HDP/3.0/services/YARN/package/alerts/alert_nodemanage...
Hadoop 常用端口号
代妈炼金术师
01-10 2117
请注意，这些是Hadoop组件的标准默认端口，实际部署过程中可以根据需要在配置文件中修改。同时，不同版本的Hadoop可能对某些端口有所调整，请以具体部署环境的实际配置为准。
hadoop
weixin_49390750的博客
09-13 916
Apache Hadoop是一个用于分布式存储和处理大规模数据的开源框架。它由多个组件组成，每个组件都有不同的功能和任务。以下是Hadoop的主要组件以及它们的作用：Hadoop分布式文件系统（HDFS - Hadoop Distributed File System）：HDFS是Hadoop的存储组件，用于存储大规模数据集。它分布在多个计算节点上，并提供高容错性。HDFS将大文件切分成小块（块大小通常为128 MB或256 MB），并复制到不同的节点上以确保数据的可用性和容错性。
遇到hadoop 集群挂掉情况处理情况分析
weixin_42489619的博客
11-15 3869
早上起来发现我们的spark调度任务挂掉（spark运行报错日志报错是数据块丢失），当时查看hadoop集群节点状态，发现bd-node01节点是Down状态（当时是挂掉了）。但是节点挂掉不应该导致任务运行不了，因为正常情况下hadoop集群数据都是有备份的，至少得是2份，即使bd-node01挂掉，也会在其它节点找bd-node01上数据的备份数据就行读取。于是带着疑问看了下overview页面发现确实是有块丢失。 于是查看hadoop集群相关数据的副本数： hiveods库副...
大数据系列 | 解决Hadoop不能打开端口8088的网页问题(50070可以打开)
热门推荐
woshinsy的博客
03-29 1万+
解决Hadoop不能打开端口8088的网页问题(50070可以打开) 原因： 本地hosts文件没有添加集群ip 集群环境没有开放8088端口 hadoop的配置文件yarn-site.xml问题 解决方法： 首先检查一下使用集群ip:8088是否可以访问 可以访问即是本地hosts配置问题 以管理员身份打开WindowsPowershell C:> CD C:\Windows\System32\drivers\etc C:\Windows\System32\drivers\etc>
Hadoop集群http://hadoop3:8088端口不能打开引发的血案
xiami010704的博客
10-12 2202
目录 问题一：The authenticity of host" hadoop3 ( 192.168.186.130) ' can't be established 解决方法： 问题二：hadoop2: nodemanager did not stop gracefully after 5 seconds: killing with kill -9 解决方法： 问题一： 在hadoop3中执行./start-yarn.sh时发生The authenticity of host" hadoop..
hadoop 8088端口无法访问 50070可以访问
daxuddaai的博客
10-18 2400
参考https://blog.csdn.net/Zsigner/article/details/95050906 Hadoop成功启动后 ip:50070可以访问到页面， 但是ip:8088提示无法访问该网站。 问题出在hadoop文件夹下/etc/hadoop/目录下的配置文件：yarn-site.xml 修改yarn-site.xml文件，将其<configuration></configuration>中的配置修改为： <configuration> .
Hadoop集群能打开50070端口网页不能打开8088端口网页
幸运的Alina的博客
05-10 9820
最近开始搭建Hadoop集群，一开始很顺利，后面慢慢的一步步爬坑，记录下遇到的问题和解决方法。 在Hadoop 集群启动后，发现直接访问50070端口的网页没有问题，如图(博主这里还做了端口映射，所以看到的端口和实际端口不同)： 但是直接访问8088端口就直接找不到 ： 经过一步步的排查，记录下排查解决的方法： 中间排查步骤如下： 1. 查看hadoop 启动的进程 因为8088...
谈谈基于CentOS7的Linux系统下装Hadoop3.2.0踩过的坑（访问不了50070以及50030，却能访问8088）
qq_38680900的博客
03-28 927
最近在玩hadoop，本以为会很简单，网上有关下载Linux下下载与安装的hadoop的教程一大把，然而。。。理想很丰满，现实很骨感，装hadoop装到我快怀疑人生了(~_~)，不是我安装是不细心，是网上有些教程太多坑，有很多教程没有说得很完整，差那么一俩步。。。推荐大家结合以下教程，修改配置文件那块，我另外给出了，因为第一个教程不全，另外友情提示一下，Linux有很多版本的，加上...
hadoop Application 里面打不开Node和Logs
john_deng2的博客
12-15 1072
hadoop查询logs的时候，点击Logs打不开，http://hadoop02:8042/node/containerlogs/container_1576407055936_0003_01_000001/root。然后经过查询资料，了解到是因为我们这里用了主机名，所以打开不了，需要在window上面设置才可以。 解决方法： 在C:\Windows\System32\drivers\etc 下...
Hadoop默认端口说明
zzhongcy的专栏
02-25 1万+
Hadoop默认端口说明 Hadoop集群的各部分一般都会使用到多个端口，有些是daemon之间进行交互之用，有些是用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多，完全记不住哪个端口对应哪个应用，特收集记录如此，以便查询。 这里包含我们使用到的组件：HDFS, YARN, HBase, Hive, ZooKeeper。 组件 D
二刷大数据（一）- Hadoop
qq_58551342的博客
04-12 952
大数据的4V特征是描述大数据特性的四个关键维度，这四个特征分别为：Volume（大量性）：Velocity（高速性）：Variety（多样性）：Value（价值性）：优势：Hadoop分布式文件系统（HDFS）是一种专为大型分布式计算和海量数据存储而设计的文件系统，它采用主/从（Master/Slave）架构来管理和存储数据。下面是HDFS工作原理的简单描述：NameNode（主节点）：DataNode（从节点）：数据存储与冗余：数据读取：心跳检测与块报告：故障检测与恢复：综上所述，HDFS通过集中式的元数
hadoop常用接口及管理页面及问题收集
碣石观海的博客
04-18 1071
50070端口：访问hadoop管理页面 8088端口：访问Yarn管理页面 8042端口：从节点node管理页面，可查看节点的MR任务处理信息（Tools ---> Local logs） 注：windows下访问UI管理页面时，需设置“C:\Windows\System32\drivers\etc\hosts”文件，添加各节点主机名，方便访问。 常见问题收集： 问题1：端口无法...
Hadoop常用端口号
Markble
09-22 5070
HDFS、YARN、HBase、Hive、Zookeeper常用端口号： 组件 节点 默认端口 配置 用途说明 HDFS DateNode 50010 dfs.datanode.address datanode服务端口，用于数据传输 HDFS DateNode 50075 dfs.datanode.http.address http服务的端口 HDFS DateNode 50475 dfs.datano.
Hadoop 1.X & Hadoop 2.X 默认端口对比
二十三小时
11-02 2069
1，Hadoop 2.X 默认端口 组件 节点 默认端口 配置 用途说明 HDFS DataNode 50010 dfs.datanode.address datanode服务端口，用于数据传输 HDFS DataNode 50075 dfs.datanode.http.address http服务的端口 HDFS Data
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值