解决Hadoop无法启动JobHistoryServer 用start-yarn.sh来运行，出现了什么替换了什么值，我看其他也是人打开也是这样，应该不是什么错，但就是无法运行，用jps查看始终没有，...

最新推荐文章于 2024-05-08 23:50:15 发布
最新推荐文章于 2024-05-08 23:50:15 发布
阅读量662 收藏
点赞数
文章标签： hadoop mr 大数据 hdfs 分布式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42576410/article/details/129532424
版权

在使用 start-yarn.sh 命令启动 Hadoop 的 JobHistoryServer 时，出现了若干警告消息，其中包括：

  • WARNING: YARN_CONF_DIR has been replaced by HADOOP_CONF_DIR. Using value of YARN_CONF_DIR.
  • WARNING: YARN_LOG_DIR has been replaced by HADOOP_LOG_DIR. Using value of YARN_LOG_DIR.
  • WARNING: Use of this script to start the MR J
澾慟
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
高可用hadoop集群start-yarn.sh之后一个namenode消失问题解决
爱米酱的博客
07-27 924
今天在启动高可用hadoop集群的时候，start-dfs.sh之后namenode还都在，但是start-yarn.sh之后，就发现其中一台namenode消失了，查找日志发现以下报错 192.168.175.113:8485: Call From marshal/192.168.175.110 to marshal03:8485 failed on connection exception: java.net.ConnectException: 拒绝连接; For more details s.
【问题解决】Hadoop集群启动后执行JPS没有DataNode或NameNode
热门推荐
午夜的行人
04-18 3万+
引言 最近在尝试在搭建Hadoop集群并测试集群是否搭建成功，但是第一次格式化NameNode并启动HDFS和YARN时发现一会儿有DataNode或者NameNode但是后面就没有了，二者没有同时存在，也尝试过停止进程再重新启动都没有解决掉该问题。 相关命令 集群第一次启动，格式化NameNode bin/hdfs namenode -format 启动HDFS sbin/start-dfs.sh 停止HDFS sbin/stop-dfs.sh 启动YARN sbin/start-yarn.sh
解决Hadoop无法启动JobHistoryServer
大佛拈花的博客
03-01 1万+
gosaint@gosaint:/usr/local/hadoop$ sbin/mr-jobhistory-daemon.sh start ==== 出现如下问题: WARNING: Use of this script to start the MR JobHistory daemon is deprecated. WARNING: Attempting to execute replace...
JobHistoryServer无法正常启动
JacksonKing的专栏
10-28 4268
今天在测试环境启动JobHistoryServer，发现无法正常启动，报错信息如下: 2019-10-28 17:44:33,030 INFO org.apache.hadoop.mapreduce.v2.hs.JobHistoryServer: registered UNIX signal handlers for [TERM, HUP, INT] 2019-10-28 17:44:33,6...
hadoop的 jobhistoryserver无法启动,不用改jdk版本
qq_73933491的博客
04-16 287
学习配置hadoop，按网上教程配置完后，然后jobhistoryserver一直没有，用jps查看没有，原理和nodemanager和resourcemanager一样，解决方法也以一样，直接再在。
hadoop之JobHistoryServer无法启动的解决方案
scfvlog的博客
10-28 4735
看完这些问题后，我继续网上翻阅出现了下面这段话，显示我的jdk版本是18的，版本冲突了，导致service编译通过（因为有jdk），然后运行失败（版本不兼容），但在次之前我是已经将java的jdk版本改到了8但是我的机子里面确实还装了一个jdk18版本，并且两个都是全局生效export。第一步：检查我们的java安装路径，然后我这里显示的是8版本的。第二步：检查我们的全局jdk路径，然后发现是18版本的。然后解决办法就是将jdk版本改回来即可。
HDP 中 hadoop yarn jobhistory 无法访问web ui 中/log 页面的问题
qq_28112019的博客
02-08 3127
HDP hadoop web 无法访问log页面
解决Hadoop无法启动JobHistoryServer 用start-yarn.sh来运行，出现了什么替换了什么值，我看其他也是人打开也是这样，应该不是什么错，但就是无法运行，用jps查看始终没有，之后在网上找方法进入sbin目录下用./mr-jobhistory-daemon.sh start historyserver，但还是无法成功没用，也依旧访问不了8080端口 WARNING: YARN_CONF_DIR has been replaced by HADOOP_CONF_DIR. Using value of YARN_CONF_DIR. WARNING: YARN_LOG_DIR has been replaced by HADOOP_LOG_DIR. Using value of YARN_LOG_DIR. WARNING: Use of this script to start the MR JobHistory daemon is deprecated. WARNING: Attempting to execute replacement "mapred --daemon start" instead. WARNING: HADOOP_MAPRED_ROOT_LOGGER has been replaced by HADOOP_ROOT_LOGGER. Using value of HADOOP_MAPRED_ROOT_LOGGER.打开后出现的，我看其他人也是一样
02-06
在使用 `start-yarn.sh` 命令启动 Hadoop 的 JobHistoryServer 时，出现了若干警告消息，其中包括： - WARNING: YARN_CONF_DIR has been replaced by HADOOP_CONF_DIR. Using value of YARN_CONF_DIR. - WARNING: ...
Hadoop搭建之 start-yarn.sh 报错
_
02-13 4981
在搭建伪分布式的Hadoop集群环境时，在配置基础环境了并成功开启了HDFS组件后，jps查看已运行的名称节点和数据节点进程， [hadoop@master hadoop]$ jps 8994 NameNode 10396 Jps 9087 DataNode 9279 SecondaryNameNode 然后尝试开启YARN组件，但是报错： [hadoop@master hadoop]$...
hadoop插件apache-hadoop-3.1.0-winutils-master.zip
12-17
5. **启动Hadoop服务**：通过`sbin`目录下的脚本启动Hadoop的各个服务，如`start-dfs.sh`启动HDFS，`start-yarn.sh`启动YARN。 6. **Hadoop命令**：现在可以通过`hadoop fs`或`hadoop dfs`命令与HDFS交互，进行文件...
源码：Hadoop-3.0.3 启动过程中执行start-all.sh开始
九师兄
09-20 1211
1. tart-all.sh脚本 有以下重要的几句shell命令： #提示start-all.sh已经过时了，被${HADOOP_HOME}/sbin/start-#dfs.sh 以及start-yarn.sh代替 echo "This script is Deprecated. Instead use start-dfs.sh and start-yarn.sh" #执行$HADOOP_HOM...
yarn正常启动，但是jps查不到，求助
最新发布
yusheng_zzz的博客
05-08 91
这里resourcemanger正常启动，但是jps却查不到这个进程，我试过单独启动，但是还是不显示。
yarn启动后用jps查看没有resourcemanager
萌兔兔MMQ！！
10-15 823
1.1.添加：如下：再次启动yarn就有了，如下：2.
Hadoop中的jobhistory配置与启动停止
段渣渣推轮子的飙车场
03-25 1万+
版权声明：未经允许，随意转载，请附上本文链接谢谢（づ￣3￣）づ╭❤～ https://blog.csdn.net/xiaoduan_/article/details/79689882 Hadoop中的jobhistory配置与启动停止 jobhistory配置 在yarn-site.xml中添加 <!-- 开启日志聚合 --> <property> ...
hadoop启动jobhistoryserver
weixin_30432179的博客
05-13 1158
　　hadoop启动jobhistoryserver来实现web查看作业的历史运行情况，由于在启动hdfs和Yarn进程之后，jobhistoryserver进程并没有启动，需要手动启动，启动的方法是通过： mr-jobhistory-daemon.sh start historyserver 命令还启动。 　　由于前面有过一篇通过web查看job的运行情况的文章（文章的出处：htt...
CDH 之 YARN JobHistory Server 运行异常
予挚之的博客
05-24 562
可以看出，因为 mapred 这个用户没有 /user 目录的相关权限导致，登录 mapred 用户或者 hdfs 用户（如果无法切换 hdfs 用户，请修改 /etc/passwd 文件，将 hdfs 列的 /sbin/nologin 改为 /bin/bash）最后重启 YARN 的 JobHistory Server 服务。将 /user/history 授权给 mapred 用户。
关于启动sbin/start-yarn.sh报错
qq_45983946的博客
03-14 883
hadoop启动 start-yarn.sh的一些错误
yarn启动后自动关闭，JPS查看有resourcemanager，无resourcemanager
静远小和尚的博客
05-06 7632
yarn-site.xml配置文件如下： <?xml version="1.0"?> <!-- Licensed under the Apache License, Version 2.0 (the "License"); you may not use this file except in compliance with the License. You ma...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值