运行Hadoop集群时namenode无法运行，在logs日志文件中出org.apache.hadoop.hdfs.server.common.InconsistentFSStateException

最新推荐文章于 2022-04-05 14:44:31 发布
最新推荐文章于 2022-04-05 14:44:31 发布
阅读量242 收藏
点赞数
分类专栏： Hadoop 文章标签： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43999048/article/details/110322032
版权

在这里插入图片描述
这也是作为初学者所犯的错：没有将datanode和namenode存放在同一文件夹下面

需要按照/etc/local/hadoop/etc/hadoop下面的hdfs-site.xml文件去创建文件（mkdir）

在这里插入图片描述
然后再使用格式化namenode（Hadoop namenode -format）
最后重新启动就好
start-all.sh/stop-all.sh
sbin/start-dfs.sh/sbin/stop-dfs.sh

一名正在努力的大数据learner
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Hadoop学习总结之一：HDFS简介.doc
06-06
Secondary NameNode并非NameNode的备份，而是帮助NameNode进行周期性的元数据检查点操作，合并fsimage（命名空间镜像）和edit logs（修改日志），以减小NameNode重启时恢复元数据的时间。 2.7、数据读取流程 当...
hadoop.dll
12-15
在这个场景中，问题出现在尝试在Eclipse环境中运行Hadoop 2.6或更高版本的MapReduce程序时，遇到了一个特定的错误提示："null entry in command string: null chmod 0700"。这个错误通常与权限配置、环境变量设置...
【Hadoop启动异常】org.apache.hadoop.hdfs.server.common.InconsistentFSStateException
累迹的博客
04-05 3383
hadoop
hadoop异常处理之nameNode进程无法启动，报org.apache.hadoop.hdfs.server.common.InconsistentFSStateException
君永夜
02-23 9909
1、问题  　重启hadoop时，控制台正常打印日志，但是jps显示无namenode进程，查询namenode日志，日志在：HADOOP_HOME/logs/ 目录下，报如下错误： 2019-02-19 19:55:34,840 ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode. ...
hadoop分析之三org.apache.hadoop.hdfs.server.namenode各个类的功能与角色
似水流年
02-03 1432
NameNode.java: 主要维护文件系统的名字空间和文件的元数据，以下是代码中的说明。 [java] view plain copy print? /**********************************************************   * NameNode serves as both directory namesp
Hadoop启动异常的处理方法
Little_Fire的博客
09-17 585
本人的Hadoop启动出现了问题 【例】 Hadoop集群： 192.168.2.9（Master：Online） 192.168.2.8（Slave：Standby） Hadoop启动后使用jps查看进程时发现少了namenode选项，于是决定查看namenode的日志文件/hadoop/logs/hadoop-cloudwave-namenode-cloudwave1.log
Hadoop报错处理方法汇总
maclaren001的专栏
05-09 2073
1.修改core-site.xml的hadoop.tmp.dir值，或者第一次初始化的时候，一定要格式化namenode,否则会报错
Hadoop集群的使用与管理.pdf
最新发布
10-30
在遇到问题时，例如服务意外关闭，应首先检查日志，如`/usr/local/hadoop/logs`下的日志文件，以定位错误原因。如果出现"running as process XXX. Stop it first"这样的提示，可能是因为服务以root用户启动，而应该...
hadoop 2.X 伪分布式配置文件
07-25
这个压缩包文件“hadoop 2.X 伪分布式配置文件”是为在单个机器上模拟Hadoop集群的伪分布式环境而设计的。这种环境对于学习、测试和调试Hadoop组件非常有用，因为它避免了实际分布式环境中的复杂性，同时保留了主要...
Hadoop HA集群配置.docx
08-23
在构建Hadoop高可用(HA)集群时，ZooKeeper起着至关重要的作用。Hadoop HA主要关注两个关键组件的高可用性：HDFS（Hadoop分布式文件系统）的HA和YARN（Yet Another Resource Negotiator）的HA。ZooKeeper作为一个...
hdfs启动报错“ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode.”
热门推荐
明明历险记
06-15 1万+
启动hdfs失败：查看日志文件：/var/log/hadoop-hdfs tail -f hadoop-cmf-hdfs-NAMENODE-XXXX.log.out错误内容如下：2018-06-15 17:20:50,996 INFO org.mortbay.log: Stopped HttpServer2$SelectChannelConnectorWithSafeStartup@bj-esbp...
关于格式化NameNode的几点注意
sghuu的博客
09-24 3495
格式化步骤 ： 先jps查看当前是否有hadoop相应的进程 如果有则关闭相应的进程 ，如果还有残留进程 则用 kill -9 端口号 杀死进程 原因： 如果在开启进程的时候去上出data和logs文件夹，因为进程仍然在运 行还是会产生相应的data和logs文件，所有并不能删除相应的记录 结束相关的进程后，在hadoop的目录下删除data和logs文件夹 原因 格式化...
hadoop中namenode中的edit.log文件查看
liuqiang211的专栏
02-25 2303
将edit.log的二进制文件变成xml文件 查看内容截图如下
关于hadoop无法启动namenode的问题解决方法之一
weixin_42036645的博客
11-24 6314
关于hadoop无法启动namenode报错：java.io.IOException: Gap in transactions. Expected to be able to read up until at least txid 1365 but unable to find any edit logs containing txid 1的问题 问题： 今天在正常使用start-all.sh启动...
Linux开机出现 operation inconsistent with current state情况
qq_35662333的博客
04-16 427
退出然后以管理员身份重新进入
【异常】org.apache.hadoop.hdfs.server.common.InconsistentFSStateException
06-01 336
1 异常信息 05-30 07:53:45,204 INFO org.apache.hadoop.hdfs.server.namenode.FSNamesystem: Maximum size of an xattr: 16384 2019-05-30 07:53:45,204 WARN org.apache.hadoop.hdfs.server.common.Storage: ...
单节点下NameNode进程无法启动
zhikanjiani的博客
09-10 989
背景：学习了若泽大数据，近期又在重新回顾一遍： **问题：**使用start-dfs.sh启动后，jps查看并没有NameNode进程。 解决： 第一步：定位到日志文件 既然NameNode进程没看见启动，我们就要去查找原因，进入到记录NameNode、DataNode、SecondaryNameNode这三个进程的文件中，查看NameNode的近200行日志。 记录三进程的日志目录在启...
Hadoop配置与集群启动详解：从hdfs-site.xml到 Namenode/Datanode设置
- 查看日志：进入logs目录并检查日志文件，确认集群运行正常 - 网络访问：通过Web UI访问HDFS，地址为`http://192.168.1.101:9870` 5. 防火墙管理： - 如果无法访问Web UI，可能需要关闭防火墙，通过`systemctl ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值