CDH6.3拆除namenode的高可用报错

最新推荐文章于 2021-09-13 18:36:57 发布
最新推荐文章于 2021-09-13 18:36:57 发布
阅读量726 收藏
点赞数
分类专栏： CDH
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/NC_NE/article/details/108727124
版权
在CDH6.3环境中，由于namenode高可用拆除后，发现secondarynamenode无法检测到edits文件。经过排查，发现存在journalNode但没有stand by NameNode，导致edits和fsimages无法合并。解决方案包括停用journalNode，移动edits文件至namenode，并重新配置edits路径。经过集群重启，问题得到解决。
摘要由CSDN通过智能技术生成

报错内容：

文件系统检查点已有 2 天，16 小时，54 分钟。占配置检查点期限 1 小时的 6,490.14%。 临界阈值：400.00%。 自上个文件系统检查点以来已发生 63,898 个事务。这是 1,000,000 的已配置检查点事务目标的 6.39%。

马上查看log文件发现secondarynamenode报错检测不到edits文件

ERROR org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode: Exception in doCheckpoint

java.io.IOException: Found no edit logs to download on NN since txid 10098943

啥情况啊，百度发现一篇类似问题的文章，讲解的非常详细关于监测点内容

https://blog.csdn.net/liujiyu1989/article/details/47829083

但是博主是secondarynamenode没有执行执行检查点的操作，而我这是没有找到edits文件，所有还得继续排查

因为集群部署不是我搭建的，我刚刚临时接手处理

发现集群上面搭建过高可用namenode，上面有journalNode在运行但是没有stand by NameNode

奇怪啊！问了一下前同事说拆除了然后加了一个secondarynamenode，原来如此

那么问题就很清楚了&#x

最低0.47元/天 解锁文章
Hub-Link
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
检查点
新月
08-18 225
Web_reg_find( “Search=Body”,  “SaveCount=ddd” // 定义查找计数变量名称,  “Text=aaa” , LAST); web_reg_save_param("session","LB=name=userSession value=","RB=.","Ord=ALL",LAST); if((atoi(lr_eval_string("{
cdh5 禁用高可用HA操作
weixin_33711641的博客
02-27 359
2019独角兽企业重金招聘Python工程师标准>>> ...
NameNode检查点状态报警：文件系统检查点已有 1 天，2 小时，23 分钟
sunfect的博客
01-02 4972
今天发现CDH Hadoop集群的NameNode显示红色报警： 检查点状态 文件系统检查点已有 1 天，2 小时，23 分钟。占配置检查点期限 1 小时的 2,639.08%。 临界阈值：400.00%。 自上个文件系统检查点以来已发生 1,182 个事务。这是 1,000,000 的已配置检查点事务目标的 0.12%。 点击报警的NameNode，可以看到具体的错误信息： 尝试重启报警的...
CDH集群高可用配置方法
清平乐的技术专栏
03-28 3039
一、高可用（HA）介绍 CDH高可用主要是HDFS和YARN，在保证hdfs数据不丢失的情况下，即使有节点宕机，重启即可也不会有影响。 HDFS 1.0中虽然存在一个第二名称节点（Secondary NameNode），但第二名称节点无法提供“热备份”功能，一旦名称节点发生故障，系统需要停机恢复。HDFS 2.0 采用HA(High Availability)架构,解决了NameNode 单点故障...
HDFS中的NameNode 检查点问题
wyj1023405602的博客
08-10 621
今天在登录CDH后发现HDFS上存在运行状况报警 由于CM会默认每隔1小时SNN会执行checkpoint操作，初步分析是SNN的checkpoint操作存在问题引起，查看SNN日志，发现如下报错。 很明显是由于SNN和NN的集群ID对不上导致的，分别查看NN所在节点（此处节点node0，文件路径/dfs/nn/current）和SNN所在节点（此处节点node1，文件路径/dfs/snn/current）的version文件确认。 ...
CDH中NameNode启动报错一例问题的处理
BabyFish13
10-11 7049
错误明细： Failed to start namenode. java.io.IOException: There appears to be a gap in the edit log. We expected txid 693082, but got txid 693668. at org.apache.hadoop.hdfs.server.namenode.MetaRecoveryC
Flink1.12.2-CDH6.3.2.7z
11-25
标题"Flink1.12.2-CDH6.3.2.7z"表明这是一个包含Flink 1.12.2版本的压缩包，它已经与CDH（Cloudera Data Hub）6.3.2版本进行了集成。CDH是Cloudera提供的一个大数据平台，它包含了Hadoop生态系统中的多个组件，如...
CDH6.3安装指南.pdf
09-11
最详细的CDH6.3安装指南，可以一步步按照文档进行安装，并且整理了安装介质（通过百度网盘下载）。
cdh6.2和cdh6.3初始化.rar
12-11
主要是对CDH6.2,CDH6.3集群安装失败后的初始化过程，让你不需要再重新格式化主机，省去很多麻烦重复的工作，对安装cdh的工作者有很大的帮助
cdh6.3.2安装包免费下载
最新发布
11-08
cdh6.3.2安装包，第二个文件，因为cdh的parcel包很大， 所以分成了三个。 里边的文件包含： CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel，1.93GB CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel.sha，40字节 CDH-...
CDH6.3搭建及集成flink文档.docx
03-24
CDH6.3搭建及集成flink文档，亲测有效。
CDH6.0.1高可用
L, there!
07-30 2217
CDH高可用主要是HDFS和YARN，在保证hdfs数据不丢失的情况下，即使有节点宕机，重启即可也不会有影响。 官网文档 目录 HDFS HA Hue 设置 Hive 设置 YARN HA Hive HA HBase HA HDFS HA 进入HDFS->操作->High Availability。 给备用NameNode命名。 这...
CDH 问题
易水寒
05-31 3916
文件系统检查点已有 1 天，14 小时，36 分钟。占配置检查点期限 1 小时的 3,860.33%。 临界阈值：400.00%。 自上个文件系统检查点以来已发生 14,632 个事务。  2个可能；  1 ， namenode的Cluster ID 与 secondnamenode的Cluster ID 不一致，对比/dfs/nn/current/VERSION 和/dfs/snn/curr
hadoop secondary namenode 部署出错所产生的错误及解决方法
热门推荐
chlaws的专栏
11-17 1万+
只叙述secondary namenode部署出错所产生的错误及解决方法 环境：suse 10.1 namenode 单独部署在cloud1 secondary namenode 单独部署在 cloud3 集群部署完成后使用Jps查看进程,发现该有的进程都有,hdfs也能上传下载文件  查看secondary name 上的log,发现在doCheckpoint都失败 20
ERROR org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode: Exception in doCheckpoint
daydaylearn的专栏
04-22 1210
http://stackoverflow.com/questions/21732988/error-org-apache-hadoop-hdfs-server-namenode-secondarynamenode-exception-in-doc We need to stop the hadoop services first , and then delete the tmp seconda
CDH6.3高可用集群误删NameNode故障恢复
h952520296的博客
09-13 425
图用了5版本的 6版本同样适用， 无变化 1.问题描述 在已启用HA的CDH集群中，误删Standby Namenode服务，导致集群异常，无法再次通过CM启用HA。异常如下 2.问题复现 1.一个健康集群并配置了HA 2.停止StandbyNameNode服务并删除 3.集群异常 4.再次通过CM启用HA 集群无法再次启用HA，问题复现。 3.解决方法 1.向集群添加一个新的NameNode和Failover Controller角...
检查hdfs数据大小_如何在HDFS中强制执行元数据检查点
cuma2369的博客
07-26 317
检查hdfs数据大小The metadata checkpointing in HDFS is done by the Secondary NameNode to merge the fsimage and the edits log files periodically and keep edits log size within a limit. For various reasons, th...
SecondaryNameNode异常排查
11-20 1850
二级namenode提示错误： 2017-11-20 09:44:58,877 ERROR org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode: Exception in doCheckpoint java.io.IOException: Inconsistent checkpoint fields. LV = -47 names
记录一次edit文件损坏导致JournalNodes Web UI无法访问排查处理过程
龚帅立的博客
03-05 1155
今天登录大数据集群例行巡检突然发现出现了两个告警： 查看发现是一台节点的jourmalNode webUI无法访问 俗话说：婶婶能忍叔叔也不能忍，一句话盘他 下面记录一下这次问题排查处理的过程： 既然说是web无法访问，那就先从前端入手，老规矩复制此链接到新的浏览器窗口打开，确实是无法访问 下面远程服务器命令行执行telnet 192.168.94.26 8480 测试端口号显示端口是存活...
cdh 安装格式化namenode的名称目录报错
06-10
您好，关于CDH安装格式化Namenode的名称目录报错的问题，可能是由于以下原因导致的： 1. Namenode所在的磁盘空间不足导致格式化失败； 2. Namenode所在的文件系统不支持格式化操作； 3. Namenode的权限设置不正确导致格式化失败； 4. Namenode的配置信息不正确导致格式化失败。 您可以尝试以下解决方法： 1. 检查Namenode所在的磁盘空间是否充足，如果不足，可以尝试清理磁盘或者增加磁盘空间； 2. 确认Namenode所在的文件系统是否支持格式化操作； 3. 检查Namenode的权限设置是否正确，确保格式化操作有足够的权限； 4. 检查Namenode的配置信息是否正确，确保格式化操作使用的是正确的配置信息。 如果以上方法无法解决问题，建议您提供更详细的错误信息，以便更好地定位和解决问题。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值