解决HA is not enable for this namenode错误

最新推荐文章于 2024-04-18 18:49:13 发布
最新推荐文章于 2024-04-18 18:49:13 发布
阅读量6.5k 收藏 5
点赞数 4
文章标签： 大数据
原文链接：http://www.cnblogs.com/c-w20140301/p/10468823.html
版权

bin 下格式化ZKFC，命令./hdfs zkfc -formatZK，报HA is not enable for this namenode错误，如下图

经过检查hdfs_site.xml文件，发现配置错误，因为后面配置的都是nn1，nn2,而红框处，应该也是nn1,nn2，此处要保持前后一致（名字只要是唯一的就行）

 

修改后，成功

 

转载于:https://www.cnblogs.com/c-w20140301/p/10468823.html

weixin_30685047
关注
  • 4
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Hadoop2.0 HA集群搭建步骤
08-11
所谓HA，即高可用，实现高可用最关键的是消除单点故障，hadoop-ha严格来说应该分成各个组件的HA机制——HDFS的HA、YARN的HA；通过双namenode消除单点故障；通过双namenode协调工作
Hadoop NameNode 高可用实现源码分析
农村外出务工男的博客
03-20 1536
一、NameNode的单节点问题      在hadoop1.x版本中,我们知道HDFS架构中的NameNode节点存在单点问题,一旦NameNode节点宕机了,整个HDFS集群将不可用，因为NameNode保存了整个HDFS的元数据信息。不过在Hadoop2.x版本解决了单点问题,下面我们结合源代码来分析其具体实现。二、NameNode的高可用架构  先上一张图片(来源于网络)     从上图可...
exception in thread “main” org.apache.hadoop.hadooplllcgalargumentException:Ha is not enabled for
miaotoull的博客
12-05 490
zk注册的时候碰到的 没有为此命名节点启用HA。
HDFS ha 格式化报错：a shared edits dir must not be specified if HA is not enabled.
weixin_34106122的博客
01-12 4136
错误内容： Formatting using clusterid: CID-19921335-620f-4e72-a056-899702613a6b2019-01-12 07:28:46,986 INFO namenode.FSEditLog: Edit logging is async:true2019-01-12 07:28:47,043 INFO namenode.FSNamesystem...
hadoop报错——ResourceManager无法启动
weixin_63507910的博客
04-14 2284
本次的遇到的问题为启动Hadoop集群后，jps查看进程中，ResourceManage节点没有启动，导致无法访问http://localhost:8088，通过查看ResourceManage的启动日志，日志中给出的错误为，笔者初步判断为yarn-site.xml文件未填写Zookeeper的端口，以及设置开启自动恢复和故障自动转移。
Hadoop 启动HA服务（高可用性）
大数据流浪法师的学习笔记与分享
12-12 2060
HA服务的启动 第一步：初始化zookeeper 在hadoop01机器上进行zookeeper的初始化，其本质工作是创建对应的zookeeper节点 cd /export/servers/hadoop-2.6.0-cdh5.14.0 bin/hdfs zkfc –formatZK 第二步：启动journalNode 三台机器执行以下命令启动journalNode，用于我们的元数据管理 cd ...
Hadoop启动不了Namenode进程，出现IllegalArgumentException异常
热门推荐
haixzzy的专栏
12-10 1万+
仔细参考了 CSDN 中的心血博客（http://blog.csdn.net/licongcong_0224/article/details/12972889）之后，终于算是把 Hadoop 2.2里要配置的内容搞清楚了。不过在启动 Hadoop 服务时，终于还是出现了问题。 这次的问题乍看起来很奇怪，在本机完成配置进行“伪分布式”启动的时候，首先，我们需要对namenode进行fo
搭建HA问题
weixin_44264223的博客
04-08 614
搭建好HA后，使用start-dfs.sh启动集群，发现namenode过一会(10s)就掉, 再通过hdfs --daemon start namenode 启动后，运行正常. 在core-site.xml中加入如下两个配置: ipc.client.connect.max.retries 100 Indicates the number of retries a client will make to establish a server connection. ipc.client.
解决hadoop在windows运行出现的bug
01-11
如果出现如下bug：“Could not locate executable null\bin\winutils.exe in the Hadoop binaries”，则下载该文件，放入hadoop的bin文件夹下，并设置环境变量HADOOP_HOME：E:\hadoop2.2.0\bin即可。
This is my version of an Intranet Chess game. It does not ha
02-23
This is my version of an Intranet Chess game. It does not have AI in it but it does check for valid moves. Source code is included.
[hadoop] ERROR: but there is no HDFS_NAMENODE_USER defined. Aborting operation. Starting datanodes
01-20
其中一个问题是报but there is no HDFS_NAMENODE_USER defined. Aborting operation. Starting datanodes 直接解决 在Hadoop安装目录下找到sbin文件夹 在里面修改四个文件 1、对于start-dfs.sh和stop-dfs.sh文件，...
数字孪生与企业
yzf060109的专栏
04-15 354
尽管 Gartner 的文章中并未明确阐述 DTO 与企业架构之间的直接联系，但 DTO 的概念似乎与企业架构工作的实践高度契合。企业架构通过对企业进行精确建模，在将企业数字孪生的概念转化为现实的过程中扮演着至关重要的角色。数字孪生技术不仅仅局限于对物理世界的数字建模和信息采集，而是在特定的应用场景中，如稳定性和复杂性的约束条件下，通过一套框架来实现虚拟与现实之间的双向反馈机制。数字孪生技术，简而言之，就是创造一个物理实体的数字双胞胎，在虚拟世界中精确模拟现实世界的行为、过程和系统。
Hadoop 3.1.3
m0_66052129的博客
04-14 1231
第1章 Hadoop概述 1.1 Hadoop是什么 1.2 Hadoop发展历史（了解） 1.3 Hadoop三大发行版本（了解） Hadoop三大发行版本：Apache、Cloudera、Hortonworks。 Apache版本最原始（最基础）的版本，对于入门学习最好。2006 Cloudera内部集成了很多大数据框架，对应产品CDH。2008 Hortonworks文档较好，对应产品HDP。2011 Hortonworks现在已经被Cloudera公司收购，推出新的品牌CDP
Spark集群的搭建
最新发布
qq_74137843的博客
04-18 621
（2）配置Workers文件。复制Workers.template文件并重命名为Workers，打开Workers文件删除原有内容，并添加如下代码，每一行代表一个子节点的主机名，这里的workers文件名为，slaves.template。（3）进入Spark的/conf目录下，复制spark-env.sh.template文件并重命名为spark-env.sh。(7)通过命令jps查看进程，开启Spark集群后，master节点增加了Master进程，而子节点则增加了Worker进程。
ELK日志分析系统之Zookeeper
AH99999的博客
04-12 934
分布式应用可以基于它实现更高级的服务，实现诸如同步服务、配置维护和集群管理或者命名的服务。Zookeeper服务自身组成一个集群，2n+1个（奇数）服务允许n个失效，集群内一半以上机器可用，Zookeeper就可用。假设 3台机器组成的集群，可以有允许一台失效，如果有2台失效，这个集群就不可用，1
Hive：trunc函数
ALX3li的博客
04-14 319
trunc函数对于日期和数值的截断详解。
1688官方API商品数据采集接口|阿里巴巴中国站获得1688商品详情 API 返回值说明
TinagirlAPI的博客
04-16 948
随着全球经济一体化和电子商务的快速发展，网络购物的需求日益增加。不断涌现的电商企业使得行业的竞争情况愈演愈烈。在这种情况下，企业不仅要加大经营力度，还要在自己的基础设施和技术上持续投入，才能更好的适应市场和消费习惯。
exception in thread "main" org.apache.hadoop.hadoopillegalargumentexception: ha is not enabled for this namenode.
06-28
### 回答1： 异常：exception in thread "main" org.apache.hadoop.hadoopillegalargumentexception: ha is not enabled for this namenode。 该异常表示在此NameNode上未启用HA（高可用性）功能。HA是一种在Hadoop集群中实现高可用性的方法，它可以确保在某个节点故障时，集群仍然可以正常工作。要解决此异常，需要在NameNode上启用HA功能。 ### 回答2： 这个错误信息意味着HA功能未启用，但在使用时却被尝试启用了。HA是指高可用性，它可以提高集群的容错性和可用性。在Hadoop中，HA是通过在多个NameNode实例之间共享状态和功能来实现的。当集群中的一个NameNode实例出现故障或停机时，HA会自动切换到另一个NameNode实例来确保服务的连续性。 通常，HA功能需要在Hadoop的配置文件中正确地配置，包括hdfs-site.xml和core-site.xml。在hdfs-site.xml中，需要设置属性dfs.nameservices并将其值设置为命名服务的名称。此外，还需将dfs.ha.namenodes.namenode1和dfs.namenode.rpc-address.namenode1.nn1设置为NameNode集群中各个NameNode实例的标识和RPC地址。在core-site.xml中，则需要设置fs.defaultFS属性以指定文件系统的默认名称服务的URL。 如果你在使用HA时遇到了“exception in thread 'main' org.apache.hadoop.hadoopillegalargumentexception: ha is not enabled for this namenode”的问题，那么可能有以下几种原因： 1. 配置文件中的某些参数没有正确设置或设置了错误的值，导致HA功能未能正确启用。 2. 存在多个NameNode实例，但HA功能没有正确启用，导致无法使用HA功能。 3. 当前操作或请求不支持HA功能，可能需要对代码或脚本进行修改。 要解决这个问题，你可以尝试检查Hadoop配置文件中的相关参数是否正确设置，确保HA功能已正确启用，并核实当前操作或请求是否支持HA功能。如果问题仍未得到解决，你可以查看Hadoop的日志文件以获取更多详细信息，并尝试与社区或Hadoop专家寻求帮助。 ### 回答3： 这个错误的意思是在使用Hadoop的高可用性（HA）时，该节点没有启用HA。HA是指在Hadoop集群中使用多个NameNode实例来提供高可用性和容错能力。如果未启用HA，则只有一个NameNode实例，如果该实例发生故障，则整个集群将无法使用。 要解决这个问题，需要在hadoop配置文件中设置HA。例如，在hdfs-site.xml文件中设置以下属性： ``` <property> <name>dfs.nameservices</name> <value>mycluster</value> </property> <property> <name>dfs.ha.namenodes.mycluster</name> <value>nn1,nn2</value> </property> <property> <name>dfs.namenode.rpc-address.mycluster.nn1</name> <value>namenode1:8020</value> </property> <property> <name>dfs.namenode.rpc-address.mycluster.nn2</name> <value>namenode2:8020</value> </property> <property> <name>dfs.client.failover.proxy.provider.mycluster</name> <value>org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider</value> </property> ``` 这将定义一个名为“mycluster”的名字服务，其中有两个NameNode实例，nn1和nn2。Hadoop客户端将使用“mycluster”来在这些NameNode实例之间进行故障转移。 当HA被正确配置后，可能还需要重启Hadoop集群来使更改生效。重启之后，应该能够使用HA功能，避免出现“exception in thread "main" org.apache.hadoop.hadoopillegalargumentexception: ha is not enabled for this namenode.”这种错误。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值