Hadoop启动dfs时报错Incorrect configuration: namenode address dfs.namenode.servicerpc-address or dfs.namen

最新推荐文章于 2023-08-11 20:12:33 发布
最新推荐文章于 2023-08-11 20:12:33 发布
阅读量7.4k 收藏 11
点赞数 4
文章标签： hadoop dfs 配置
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/JasonZhangOO/article/details/77885219
版权

Hadoop2.7.4安装之后./sbin/start-dfs.sh报错：

Incorrect configuration: namenode address dfs.namenode.servicerpc-address or dfs.namenode.rpc-address is not configured.
Starting namenodes on []
Error: Cannot find configuration directory: /usr/local/hadoop/conf
Error: Cannot find configuration directory: /usr/local/hadoop/conf
Starting secondary namenodes [0.0.0.0]
Error: Cannot find configuration directory: /usr/local/hadoop/conf


原因是Hadoop之前的版本hadoop-env.sh, hdfs-site.xml, core-site.xml, mapred-site.xml这些配置文件都是在/usr/local/hadoop/conf

较新的版本在/usr/local/hadoop/etc/hadoop

需要设置环境变量export HADOOP_CONF_DIR = $HADOOP_HOME/etc/hadoop

输入echo $HADOOP_CONF_DIR验证配置的位置

JasonZhangOO
关注
Incorrect configuration: namenode address dfs.namenode.servicerpc-address or dfs.namenode.rpc-addres
棒棒糖的专栏
01-23 1万+
Incorrect configuration: namenode address dfs.namenode.servicerpc-address or dfs.namenode.rpc-address is not configured. Starting namenodes on [] Error: Cannot find configuration directory: /etc/had
执行bin/hdfs haadmin -transitionToActive nn1时出现，Automatic failover is enabled for NameNode at bigdata-...
weixin_34087503的博客
06-16 2082
    　　不多说，直接上干货！     　　首先，                           　　　　那么，你也许，第一感觉，是想到的是 全网最详细的Hadoop HA集群启动后，两个namenode都是standby的解决办法（图文详解）       　　　　这里，nn1，不多赘述了。很简单，大家自行去看。   　　　　...
Incorrect configuration: namenode address dfs.namenode.servicerpc-address or dfs.namenode.rpc-addres...
weixin_30702887的博客
10-26 794
在搭建Hadoop集群的时候，遇到了这样的一个报错。 就在启动HDFS调用命令： start-dfs.sh 的时候，报错： 然后输密码就一直很奇怪，反正一直运行不成功。 百度了半天，确定是core-site.xml的问题。 这段代码决定了什么namenode 的rpcaddress： <property> <name...
Hadoop启动datanode 的时候连接不上，Incorrect configuration: namenode address dfs.namenode.servicerpc-address
mayday555525的博客
08-11 572
linux的hostname不可以存在下划线，我的hostname为hadoop_node01，将hostname改为node1之后，并且将Hadoop相关配置中的“hadoop_node01”全部改为“node1”之后在重新启动就可以正常运行了。
启动Hadoop时遇到的Incorrect configuration问题
自封的羽球大佬
03-15 2226
问题描述： Incorrect configuration: namenode address dfs.namenode.servicerpc-address or dfs.namenode.rpc-address is not configured（配置异常问题） 解决： 进入Hadoop根目录的etc/hadoop/core-site.xml，添加以下配置： &lt;property...
Hadoop启动时报错：Incorrect configuration: namenode address dfs.namenode.servicerpc-address or...
云聪的技术错题集
07-28 9124
Hadoop之前都是好好的，今天早上启动突然报错： Incorrect configuration: namenode address dfs.namenode.servicerpc-address or dfs.namenode.rpc-address is not configured. 在网上一顿乱找，各种方法一阵乱试，都没有解决问题。这时，突然想到，问题可能是昨天正确启动到今天启动错误
CentOS hadoop配置错误Incorrect configuration: namenode address dfs.namenode.servicerpc-address ......
weixin_30686845的博客
09-09 472
# ./sbin/start-all.sh This script is Deprecated. Instead use start-dfs.sh and start-yarn.sh 13/09/09 16:50:21 WARN util.NativeCodeLoader: Unable to load native-hadoop library...
Hadoop格式化两次：Incorrect configuration: namenode address dfs.namenode.servicerpc-address or dfs.namenod
weixin_42698464的博客
12-11 2271
具体解决办法： 1、进入到hadoop的根目录下。 2、在etc/hadoop/core-site.xml中增加如下配置： <configuration> <property> <name>fs.default.name</name> <value>hdfs://master:9000</value> </pr...
namenode address dfs.namenode.servicerpc-address or dfs.namenode. hadoop启动时新节报错
hongchenshijie的博客
11-06 927
报错内容: 发生的原因: 添加一个新节点时,发现启动是正常的去新添加的节点 hadoop04 使用jps查看时发现 hadoop04的datenode没有启动 分析: 去 hadoop04 打开日志文件 发现出现如上图的错误, 想到可能是配置文件的问题 解决方法: 在hadoop04节点 hadoop的根目录下(cd /hadoop的安装目录/etc/hadoop/)的 core-site....
Hadoop-HA模式（详解）
窃格拉瓦
08-21 2万+
一、概述 之前的博客写了搭建hadoop集群环境，今天写一写搭建高可用（HA）环境。Hadoop-HA模式大致分为两个(个人在学习中的理解)： namenode 高可用 yarn 高可用 1、Namenode HA Namenode在HDFS中是一个非常重要的组件，相当于HDFS文件系统的心脏，在显示分布式集群环境中，还是会有可能出现Namenode的崩溃或各种意外。所以，高可用模...
hadoop集群报错日志整理和总结
尹若轩
08-27 3577
用CentOS7.0做集群，发现了许多问题，主要总结如下：     1.配置文件的配置参数有错误。     2.操作系统的环境没有设置好。     3.文件的权限没有分配好。 常见的错误如下： 1.环境问题 centos7关闭防火墙    当时一直认为关闭防火墙的命令是：systemctl  iptables stop   直接命令：service firewalld stop
hdfs相关问题及解决方案归档
weixin_44976835的博客
08-26 2821
目录问题1：reduce预处理阶段shuffle时获取已完成的map的输出失败次数超过上限问题2：Too many fetch-failures问题3：处理MR速度特别的慢问题4：能够启动datanode，但无法访问，也无法结束问题5：节点断联问题6：JVM内存不够问题7：Hadoop添加节点的方法问题8：给单个node新加硬盘问题9：IO写操作出现问题问题10：HDFS退服节点的方法问题11：IO异常问题12：status of 255 error问题13：sort by value问题14：restar
Centos7 zookeeper3.5.6 + hadoop3.2.1+Hbase2.2.2完全分布式+高可用（HA）图文教程
gdeasy的博客
11-19 6116
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Ma...
hadoop报错java.io.IOException: Incorrect configuration: namenode address dfs.namenode.servicerpc-addre...
weixin_33976072的博客
06-07 1143
      　　不多说，直接上干货！   问题详情             问题排查 spark@master:~/app/hadoop$ sbin/start-all.sh This script is Deprecated. Instead use start-dfs.sh and start-yarn.sh Starting namenod...
CentOS hadoop配置错误Incorrect configuration: namenode address dfs.namenode.servicerpc-address ...
贾慧玉的博客
11-13 1548
./sbin/start-all.shThis script is Deprecated. Instead use start-dfs.sh and start-yarn.sh 13/09/09 16:50:21 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using bui
Hadoop问题：Incorrect configuration: namenode address dfs.namenode.rpc-address is not configured
weixin_34341229的博客
10-05 659
问题描述：Incorrect configuration: namenode address dfs.namenode.rpc-address is not configured 问题分析：core-site.xml和hdfs-site.xml有问题 1.内容 2.格式（缩进为四个空格）...
解决hadoop启动时的dfs.namenode.servicerpc-address or dfs.namenode.rpc-address is not configured.错误
热门推荐
拂晓的专栏
08-19 3万+
今天在搭建玩Hadoop的环境，通过start-all.sh启动完毕后，发现只能打开localhost:8042的管理界面，而当进入localhost:50070对应的HDFS的web管理中心时，浏览器中一直提示无法连接。于是又仔细去翻看了下启动时的信息，发现提示了如下错误： Incorrect configuration: namenode address dfs.namenode.servi
Hadoop 的sbin/start-dfs.sh 启动 报错
qq_26430717的博客
11-28 6653
HADOOP 命令sbin/start-dfs.sh 启动 报错 Error: Cannot find configuration directory: /etc/hadoop JAVA_HME is not set and could not be found 配置hadoop-env.sh 文件位置为 hadoop-2.7.1/etc/hadoop。文件路径写你自己的jdk 和hadoop路径。 export JAVA_HOME=/usr/jdk1.8.0_221 export H...
hadoop@yhd-VMware-Virtual-Platform:/usr/local/hadoop$ sudo ./sbin/start-dfs.sh ERROR: JAVA_HOME is not set and could not be found.
最新发布
09-11
当你运行`sudo ./sbin/start-dfs.sh`并且收到这个错误提示"JAVA_HOME is not set and could not be found"，这意味着Hadoop正在寻找用于执行Java程序的JAVA_HOME环境变量，但是它没有找到。JAVA_HOME通常是安装Java Development Kit (JDK)的位置，在Linux或Unix系统中，它是Hadoop和其他Java应用程序的重要路径。 要解决这个问题，你需要首先确保已经安装了JDK，并将其添加到系统的PATH变量或者设置JAVA_HOME。步骤如下： 1. **检查是否已安装JDK**：运行`java -version`看看是否能显示JDK版本，如果没有，先安装JDK。 2. **设置JAVA_HOME**：如果你已经安装了JDK，编辑`~/.bashrc` 或 `~/.profile` 文件（取决于你的shell），并在其中添加如下行： ``` export JAVA_HOME=/path/to/your/jdk_directory ``` 将`/path/to/your/jdk_directory`替换为实际的JDK安装目录。 3. **使更改生效**：然后退出并重新登录终端，或者运行`source ~/.bashrc`（如果是`.bashrc`) 或者`source ~/.profile`（如果是`.profile`），使新的环境变量生效。 4. **再次尝试启动HDFS**：现在你应该可以使用`sudo ./sbin/start-dfs.sh`无误地启动Hadoop集群了。 如果还是遇到问题，检查你的JAVA_HOME路径是否正确，或者直接将`JAVA_HOME`值指定给`sbin/start-dfs.sh`命令，比如： ``` sudo ./sbin/start-dfs.sh --java-home /path/to/your/jdk_directory ```
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值