hadoop中格式化HDFS失败的解决办法

最新推荐文章于 2021-09-28 23:54:02 发布
最新推荐文章于 2021-09-28 23:54:02 发布
阅读量1.4w 收藏 5
点赞数 1
分类专栏： Hadoop 文章标签： Hadoop   HDFS
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_38712026/article/details/79424969
版权

        安装Hadoop过程中，遇HDFS格式化失败，报错如下：         找了下网上的资料，大家出错的情形都略为奇葩。中有format误写为formate，有-format中前面的横线应用中文输入法横线的。。。我属于后者，换为横线。

    再次格式化之后，出现INFO common.Storage: Storage directory /home/grid/hadoop-2.7.5/hdfs/name has been successfully formatted.表示格式化成功。


csdn_funquiz
关注
  • 1
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
HDFS ha 格式化报错：a shared edits dir must not be specified if HA is not enabled.
weixin_34106122的博客
01-12 4215
错误内容： Formatting using clusterid: CID-19921335-620f-4e72-a056-899702613a6b2019-01-12 07:28:46,986 INFO namenode.FSEditLog: Edit logging is async:true2019-01-12 07:28:47,043 INFO namenode.FSNamesystem...
[hadoop] 重新格式化HDFS的详细步骤
朱同学的博客
10-08 2837
使用ZKFC组件的情况下 1 删除两个目录 core-site.xml配置文件中指定的目录(默认位置在/mnt目录下) <property> <name>dfs.name.dir</name> <value>/home/hadoop/hdfs/name</value> <description>name...
hadoop格式化HDFS出现错误解决办法
09-30
主要介绍了hadoop格式化HDFS出现错误解决办法的相关资料,hadoop格式化HDFS报错java.net.UnknownHostException，这里提供解决办法，需要的朋友可以参考下
Hadoop中格式化文件HDFS失败
weixin_54348877的博客
09-28 6995
写在前面： 运行失败的时候，一定要看报错信息！！对症下药。 报错信息： 报错分析： 1. 找到ERROR 在第一行中有个“ ERROR ” ，那我们就从这里开始看，这里后面会告诉你错在哪个文件夹哪行哪里，具体错误是什么 2. SystemId 这里告诉了你在文件（file）中，/export/servers/hadoop-2.7.4/etc/hadoop/mapred-site.xml这个文件出错了。那我们就要切换到文件的目录下，启用vi编辑器查看具体信息。 cd /export/se
hdfs namenode -format格式化失败问题
ruanle1的博客
05-11 5062
hdfs namenode -format格式化失败问题 在多次格式化namenode之后，发现再进行namenode的格式化出现如上问题，格式化失败，参考网上一些文章之后 hadoop中namenode格式化失败的解决 等文章之后，发现删除tmp无法解决，在阅读hdfs-site.xml配置文件后发现，slave中还会新建了一个QJEditsData文件夹，应当将tmp和QJEditsData文件夹都删除再进行format命令。 ...
安装hadoop 时遇到的问题，格式化文件系统时，不能成功
De_Moivre的专栏
05-10 997
 安装hadoop 时遇到的问题，格式化文件系统时，不能成功 执行命令： hadoop namenode –format 出现下面错误： /usr/bin/hadoop: line 321: /usr/java/default/bin/java: No such file or directory /usr/bin/hadoop: line 387: /usr/java/default...
hadoop重新格式化HDFS步骤解析
09-30
首先，我们来解析一下Hadoop重新格式化HDFS的步骤。这个过程包括几个关键步骤： 1. 修改HDFS配置文件：hdfs-site.xml文件是Hadoop配置文件之一，它用于定义HDFS的存储目录。在这个文件中，你需要找到标签，其中的...
重新格式化HDFS的方法
赶路人儿
04-09 2352
由于多次格式化hdfs，可能会导致namenode无法启动，所以如果要重新格式化时，需要按如下步骤进行： 1、查看hdfs-ste.xml： dfs.name.dir /home/hadoop/hdfs/name namenode上存储hdfs名字空间元数据 dfs.data.dir /home/hadoop/hdsf/data
解决HA is not enable for this namenode错误
weixin_30685047的博客
03-04 6694
bin 下格式化ZKFC，命令./hdfs zkfc -formatZK，报HA is not enable for this namenode错误，如下图 经过检查hdfs_site.xml文件，发现配置错误，因为后面配置的都是nn1，nn2,而红框处，应该也是nn1,nn2，此处要保持前后一致（名字只要是唯一的就行） 修改后，成功 转载于:https://www.c...
hdfs格式化
BigData私房菜
04-26 2208
当集群突然关闭，造成datanode无法启动，一个比较便捷的方法就是直接格式化hdffs,前提是里面的数据都可以删除 每个节点进入保存数据的文件夹，可以再配置文件中查看，namenode该目录下有name文件夹，datanode下有data文件夹，每个节点都要删除，删除后再在namenode下载执行 hdfs namenode -format hadoop namenode -format；曾...
linux中hdfs格式化,HDFS操作命令
weixin_28928039的博客
05-13 4707
总结：上传文件：put、copyFromLocal、moveFromLocal下载文件：get、copyToLocal、moveToLocal查看文件：text、cat、tail合并文件：getmerge命令详解HDFS命令基本格式：hadoop fs -cmd < args >表格：选项名称使用格式含义-ls-ls 查看指定路径的当前目录结构-lsr-lsr 递归查看指定路径的目录结...
HDFS源码分析——格式化
坐禅小和尚的专栏
09-24 1188
HDFS NameNode保存了两个元数据文件fsimage和edits。如果想要对文件系统进行格式化，应该进行哪些操作呢？按照我们的理解，首先要把已有的fsimage和edits全部删除；其次，重新建立新的fsimage和edits；最后，通知所有的datanode，命令其删除相应的数据。通过阅读HDFS的源程序，我们得知，前两部是HDFS已经实现的；但是，其好像没有通知datanode进行数据
HDFS配置及常见命令
IT_Octopus的博客
06-11 1264
HDFS是Hadoop中用来存储文件的。 1、HDFS 是做什么的 HDFS（Hadoop Distributed File System）是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础，是基于流数据模式访问和处理超大文件的需求而开发的，可以运行于廉价的商用服务器上。它所具有的高容错、高可靠性、高可扩展性、高获得性、高吞吐率等特征为海量数据提供了不怕故障的存储，为超大数据集（La...
HDFS格式化报错
热门推荐
grantxx的专栏
01-17 1万+
异常描述 [grant@zz_mars bin 16:08 ]$ ./hadoop namenode -format DEPRECATED: Use of this script to execute hdfs command is deprecated. Instead use the hdfs command for it. 13/01/17 16:
启动关闭集群——格式化失败解决方法
qq_59947103的博客
09-24 2455
做完Hadoop的所有配置后，即可执行格式化NameNode操作，该操作会在NameNode所在机器初始化些HDFS的相关配置，并且该操作在集群搭建过程中只需执行一次,执行格式化之前可以先配置环境变量。1.配置环境变量是在master. slavel 、 slave2、 slave3上修改/etc/profile文件 2.在文件末尾添加代码所示的内容，文件修改完保存退出 3.执行命令 "source /etc/profile”来使配置生效 4.重新格式化，命令"hdfs namenode -f..
Hadoop namenode -format 出现Timed out waiting for response from loggers错误
weixin_38875344的博客
04-09 4111
在上一篇文章中提到阿里云实现不同账号，相同地域的内网互通，配置Zookeeper和Hadoop 但是在Hadoop中主节点进行namenode的初始化时遇见如下情况 java.io.IOException: Timed out waiting for response from loggers 这个错误的出现，网上并没有给出直接的解决方案。 前后修改各种配置文件，手动清空tmp文件内容 清空lo...
华为云搭建hadoop大数据之格式化zookeeper问题
qq_44982182的博客
05-28 630
华为云搭建hadoop大数据之格式化zookeeper问题 华为云搭建hadoop大数据之格式化zookeeper问题： 在搭建HADOOP集群时，在格式化ZKFC时，总报org.apache.hadoop.HadoopIllegalArgumentException: Bad argument: –formatZK。 原因 是原因是因为在进行zookeeper格式化时我们习惯了复制 hdfs zkfc -formatZK 命令到命令行。 解决办法 英文状态下手动收入 hdfs zkfc -format
hadoop及zookeeper集群搭建常见问题
weixin_43482612的博客
11-08 2355
问题一：yarn启动异常： 2019-09-30 18:15:49,231 FATAL org.apache.hadoop.yarn.server.resourcemanager.ResourceManager: Error starting ResourceManager org.apache.hadoop.HadoopIllegalArgumentException: Configuration doesn't specify yarn.resourcemanager.cluster-id at
虚拟机中配置hadoop环境中hdfs格式化失败
最新发布
05-02
在虚拟机中配置Hadoop环境时，当尝试格式化HDFS时，可能会遇到失败的情况。这可能是由于多种原因导致的。 首先，需要检查Hadoop配置文件是否正确设置。确保core-site.xml和hdfs-site.xml中指定了正确的本地文件系统...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值