HDFS格式化报错

最新推荐文章于 2024-05-05 19:12:30 发布
最新推荐文章于 2024-05-05 19:12:30 发布
阅读量1.3w 收藏 2
点赞数
分类专栏： tech

异常描述



[grant@zz_mars bin 16:08 ]$ ./hadoop namenode -format
DEPRECATED: Use of this script to execute hdfs command is deprecated.
Instead use the hdfs command for it.


13/01/17 16:12:03 INFO namenode.NameNode: STARTUP_MSG: 
/************************************************************
STARTUP_MSG: Starting NameNode
STARTUP_MSG:   host = java.net.UnknownHostException: zz.chen: zz.chen
STARTUP_MSG:   args = [-format]
STARTUP_MSG:   version = 0.22.0
STARTUP_MSG:   classpath = /home/grant/hadoop-0.22.0/bin/../conf:/usr/java/jdk1.7.0_09/lib/tools.jar:/home/grant/hadoop-0.22.0/bin/..:/home/grant/hadoop-0.22.0/bin/../hadoop-common-0.22.0.jar:/home/grant/hadoop-0.22.0/bin/../hadoop-common-test-0.22.0.jar:/home/grant/hadoop-0.22.0/bin/../hadoop-hdfs-0.22.0.jar:/home/grant/hadoop-0.22.0/bin/../hadoop-hdfs-0.22.0-sources.jar:/home/grant/hadoop-0.22.0/bin/../hadoop-hdfs-ant-0.22.0.jar:/home/grant/hadoop-0.22.0/bin/../hadoop-hdfs-test-0.22.0.jar:/home/grant/hadoop-0.22.0/bin/../hadoop-hdfs-test-0.22.0-sources.jar:/home/grant/hadoop-0.22.0/bin/../hadoop-mapred-0.22.0.jar:/home/grant/hadoop-0.22.0/bin/../hadoop-mapred-0.22.0-sources.jar:/home/grant/hadoop-0.22.0/bin/../hadoop-mapred-examples-0.22.0.jar:/home/grant/hadoop-0.22.0/bin/../hadoop-mapred-test-0.22.0.jar:/home/grant/hadoop-0.22.0/bin/../hadoop-mapred-tools-0.22.0.jar:/home/grant/hadoop-0.22.0/bin/../lib/ant-1.6.5.jar:/home/grant/hadoop-0.22.0/bin/../lib/ant-1.7.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/ant-launcher-1.7.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/asm-3.3.jar:/home/grant/hadoop-0.22.0/bin/../lib/aspectjrt-1.6.5.jar:/home/grant/hadoop-0.22.0/bin/../lib/aspectjtools-1.6.5.jar:/home/grant/hadoop-0.22.0/bin/../lib/avro-1.5.3.jar:/home/grant/hadoop-0.22.0/bin/../lib/avro-compiler-1.5.3.jar:/home/grant/hadoop-0.22.0/bin/../lib/avro-ipc-1.5.3.jar:/home/grant/hadoop-0.22.0/bin/../lib/commons-cli-1.2.jar:/home/grant/hadoop-0.22.0/bin/../lib/commons-codec-1.4.jar:/home/grant/hadoop-0.22.0/bin/../lib/commons-collections-3.2.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/commons-daemon-1.0.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/commons-el-1.0.jar:/home/grant/hadoop-0.22.0/bin/../lib/commons-httpclient-3.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/commons-lang-2.5.jar:/home/grant/hadoop-0.22.0/bin/../lib/commons-logging-1.1.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/commons-logging-api-1.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/commons-net-1.4.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/core-3.1.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/ecj-3.5.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/guava-r09.jar:/home/grant/hadoop-0.22.0/bin/../lib/hsqldb-1.8.0.10.jar:/home/grant/hadoop-0.22.0/bin/../lib/jackson-core-asl-1.7.3.jar:/home/grant/hadoop-0.22.0/bin/../lib/jackson-mapper-asl-1.7.3.jar:/home/grant/hadoop-0.22.0/bin/../lib/jasper-compiler-5.5.12.jar:/home/grant/hadoop-0.22.0/bin/../lib/jasper-runtime-5.5.12.jar:/home/grant/hadoop-0.22.0/bin/../lib/jdiff-1.0.9.jar:/home/grant/hadoop-0.22.0/bin/../lib/jets3t-0.7.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/jetty-6.1.26.jar:/home/grant/hadoop-0.22.0/bin/../lib/jetty-util-6.1.26.jar:/home/grant/hadoop-0.22.0/bin/../lib/jsch-0.1.42.jar:/home/grant/hadoop-0.22.0/bin/../lib/jsp-2.1-glassfish-2.1.v20091210.jar:/home/grant/hadoop-0.22.0/bin/../lib/jsp-2.1-jetty-6.1.26.jar:/home/grant/hadoop-0.22.0/bin/../lib/jsp-api-2.1-glassfish-2.1.v20091210.jar:/home/grant/hadoop-0.22.0/bin/../lib/junit-4.8.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/kfs-0.3.jar:/home/grant/hadoop-0.22.0/bin/../lib/log4j-1.2.16.jar:/home/grant/hadoop-0.22.0/bin/../lib/mockito-all-1.8.2.jar:/home/grant/hadoop-0.22.0/bin/../lib/mockito-all-1.8.5.jar:/home/grant/hadoop-0.22.0/bin/../lib/oro-2.0.8.jar:/home/grant/hadoop-0.22.0/bin/../lib/paranamer-2.3.jar:/home/grant/hadoop-0.22.0/bin/../lib/paranamer-ant-2.3.jar:/home/grant/hadoop-0.22.0/bin/../lib/paranamer-generator-2.3.jar:/home/grant/hadoop-0.22.0/bin/../lib/qdox-1.12.jar:/home/grant/hadoop-0.22.0/bin/../lib/servlet-api-2.5-20081211.jar:/home/grant/hadoop-0.22.0/bin/../lib/slf4j-api-1.6.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/slf4j-log4j12-1.6.1.jar:/home/grant/hadoop-0.22.0/bin/../lib/snappy-java-1.0.3.2.jar:/home/grant/hadoop-0.22.0/bin/../lib/velocity-1.6.4.jar:/home/grant/hadoop-0.22.0/bin/../lib/xmlenc-0.52.jar:/home/grant/hadoop-0.22.0/bin/../lib/jsp-2.1/*.jar:/home/grant/hadoop-0.22.0/hdfs/bin/../conf:/home/grant/hadoop-0.22.0/hdfs/bin/../hadoop-hdfs-*.jar:/home/grant/hadoop-0.22.0/hdfs/bin/../lib/*.jar:/home/grant/hadoop-0.22.0/hdfs/bin/../hadoop-hdfs-*.jar:/home/grant/hadoop-0.22.0/hdfs/bin/../lib/*.jar
STARTUP_MSG:   build = http://svn.apache.org/repos/asf/hadoop/common/branches/branch-0.22/common -r 1207774; compiled by 'jenkins' on Sun Dec  4 00:57:22 UTC 2011
************************************************************/
13/01/17 16:12:03 WARN common.Util: Path /home/grant/hdfs/name should be specified as a URI in configuration files. Please update hdfs configuration.
13/01/17 16:12:03 WARN common.Util: Path /home/grant/hdfs/name should be specified as a URI in configuration files. Please update hdfs configuration.
13/01/17 16:12:03 INFO namenode.FSNamesystem: defaultReplication = 1
13/01/17 16:12:03 INFO namenode.FSNamesystem: maxReplication = 512
13/01/17 16:12:03 INFO namenode.FSNamesystem: minReplication = 1
13/01/17 16:12:03 INFO namenode.FSNamesystem: maxReplicationStreams = 2
13/01/17 16:12:03 INFO namenode.FSNamesystem: shouldCheckForEnoughRacks = false
13/01/17 16:12:03 INFO util.GSet: VM type       = 32-bit
13/01/17 16:12:03 INFO util.GSet: 2% max memory = 17.77875 MB
13/01/17 16:12:03 INFO util.GSet: capacity      = 2^22 = 4194304 entries
13/01/17 16:12:03 INFO util.GSet: recommended=4194304, actual=4194304
13/01/17 16:12:03 INFO metrics.MetricsUtil: Unable to obtain hostName
java.net.UnknownHostException: zz.chen: zz.chen
at java.net.InetAddress.getLocalHost(InetAddress.java:1438)
at org.apache.hadoop.metrics.MetricsUtil.getHostName(MetricsUtil.java:95)
at org.apache.hadoop.metrics.MetricsUtil.createRecord(MetricsUtil.java:84)
at org.apache.hadoop.security.UserGroupInformation$UgiMetrics.<init>(UserGroupInformation.java:103)
at org.apache.hadoop.security.UserGroupInformation.<clinit>(UserGroupInformation.java:183)
at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.setConfigurationParameters(FSNamesystem.java:461)
at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.<init>(FSNamesystem.java:432)
at org.apache.hadoop.hdfs.server.namenode.NameNode.format(NameNode.java:1406)
at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1523)
at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1543)
Caused by: java.net.UnknownHostException: zz.chen
at java.net.Inet4AddressImpl.lookupAllHostAddr(Native Method)
at java.net.InetAddress$1.lookupAllHostAddr(InetAddress.java:866)
at java.net.InetAddress.getAddressesFromNameService(InetAddress.java:1258)
at java.net.InetAddress.getLocalHost(InetAddress.java:1434)
... 9 more
13/01/17 16:12:03 INFO namenode.FSNamesystem: fsOwner=grant
13/01/17 16:12:03 INFO namenode.FSNamesystem: supergroup=supergroup
13/01/17 16:12:03 INFO namenode.FSNamesystem: isPermissionEnabled=true
13/01/17 16:12:03 INFO namenode.FSNamesystem: isBlockTokenEnabled=false blockKeyUpdateInterval=0 min(s), blockTokenLifetime=0 min(s)
13/01/17 16:12:03 INFO namenode.NameNode: Caching file names occuring more than 10 times 
13/01/17 16:12:04 INFO common.Storage: Saving image file /home/grant/hdfs/name/current/fsimage using no compression
13/01/17 16:12:04 INFO common.Storage: Image file of size 112 saved in 0 seconds.
13/01/17 16:12:04 INFO common.Storage: Storage directory /home/grant/hdfs/name has been successfully formatted.
13/01/17 16:12:04 INFO namenode.NameNode: SHUTDOWN_MSG: 
/************************************************************
SHUTDOWN_MSG: Shutting down NameNode at java.net.UnknownHostException: zz.chen: zz.chen
************************************************************/



我的解决方案：在/etc/hosts文件里加一行 :

                           127.0.0.1     zz.chen



以下是转载：


在对HDFS格式化，执行hadoop namenode -format命令时，出现未知的主机名的问题，异常信息如下所示：

[plain]  view plain copy
  1.  [shirdrn@localhost bin]$ hadoop namenode -format  
  2. 11/06/22 07:33:31 INFO namenode.NameNode: STARTUP_MSG:   
  3. /************************************************************  
  4. STARTUP_MSG: Starting NameNode  
  5. STARTUP_MSG:   host = java.net.UnknownHostException: localhost.localdomain: localhost.localdomain  
  6. STARTUP_MSG:   args = [-format]  
  7. STARTUP_MSG:   version = 0.20.0  
  8. STARTUP_MSG:   build = https://svn.apache.org/repos/asf/hadoop/core/branches/branch-0.20 -r 763504; compiled by 'ndaley' on Thu Apr  9 05:18:40 UTC 2009  
  9. ************************************************************/  
  10. Re-format filesystem in /tmp/hadoop/hadoop-shirdrn/dfs/name ? (Y or N) Y  
  11. 11/06/22 07:33:36 INFO namenode.FSNamesystem: fsOwner=shirdrn,shirdrn  
  12. 11/06/22 07:33:36 INFO namenode.FSNamesystem: supergroup=supergroup  
  13. 11/06/22 07:33:36 INFO namenode.FSNamesystem: isPermissionEnabled=true  
  14. 11/06/22 07:33:36 INFO metrics.MetricsUtil: Unable to obtain hostName  
  15. java.net.UnknownHostException: localhost.localdomain: localhost.localdomain  
  16.         at java.net.InetAddress.getLocalHost(InetAddress.java:1353)  
  17.         at org.apache.hadoop.metrics.MetricsUtil.getHostName(MetricsUtil.java:91)  
  18.         at org.apache.hadoop.metrics.MetricsUtil.createRecord(MetricsUtil.java:80)  
  19.         at org.apache.hadoop.hdfs.server.namenode.FSDirectory.initialize(FSDirectory.java:73)  
  20.         at org.apache.hadoop.hdfs.server.namenode.FSDirectory.<init>(FSDirectory.java:68)  
  21.         at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.<init>(FSNamesystem.java:370)  
  22.         at org.apache.hadoop.hdfs.server.namenode.NameNode.format(NameNode.java:853)  
  23.         at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:947)  
  24.         at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:964)  
  25. 11/06/22 07:33:36 INFO common.Storage: Image file of size 97 saved in 0 seconds.  
  26. 11/06/22 07:33:36 INFO common.Storage: Storage directory /tmp/hadoop/hadoop-shirdrn/dfs/name has been successfully formatted.  
  27. 11/06/22 07:33:36 INFO namenode.NameNode: SHUTDOWN_MSG:   
  28. /************************************************************  
  29. SHUTDOWN_MSG: Shutting down NameNode at java.net.UnknownHostException: localhost.localdomain: localhost.localdomain  
  30. ************************************************************/  
我们通过执行hostname命令可以看到：

[plain]  view plain copy
  1. [shirdrn@localhost bin]# hostname  
  2. localhost.localdomain  
也就是说，Hadoop在格式化HDFS的时候，通过hostname命令获取到的主机名是localhost.localdomain，然后在/etc/hosts文件中进行映射的时候，没有找到，看下我的/etc/hosts内容：

[plain]  view plain copy
  1. [root@localhost bin]# cat /etc/hosts  
  2. # Do not remove the following line, or various programs  
  3. # that require network functionality will fail.  
  4. 127.0.0.1               localhost       localhost  
  5. 192.168.1.103           localhost       localhost  
也就说，通过localhost.localdomain根本无法映射到一个IP地址，所以报错了。

此时，我们查看一下/etc/sysconfig/network文件：

[plain]  view plain copy
  1. NETWORKING=yes  
  2. NETWORKING_IPV6=yes  
  3. HOSTNAME=localhost.localdomain  

可见，执行hostname获取到这里配置的HOSTNAME的值。


解决方法


修改/etc/sysconfig/network中HOSTNAME的值为localhost，或者自己指定的主机名，保证localhost在/etc/hosts文件中映射为正确的IP地址，然后重新启动网络服务：

[plain]  view plain copy
  1. [root@localhost bin]# /etc/rc.d/init.d/network restart  
  2. Shutting down interface eth0:  [  OK  ]  
  3. Shutting down loopback interface:  [  OK  ]  
  4. Bringing up loopback interface:  [  OK  ]  
  5. Bringing up interface eth0:    
  6. Determining IP information for eth0... done.  
  7. [  OK  ]  

这时，再执行格式化HDFS命令，以及启动HDFS集群就正常了。

格式化：

[plain]  view plain copy
  1. [shirdrn@localhost bin]$ hadoop namenode -format  
  2. 11/06/22 08:02:37 INFO namenode.NameNode: STARTUP_MSG:   
  3. /************************************************************  
  4. STARTUP_MSG: Starting NameNode  
  5. STARTUP_MSG:   host = localhost/127.0.0.1  
  6. STARTUP_MSG:   args = [-format]  
  7. STARTUP_MSG:   version = 0.20.0  
  8. STARTUP_MSG:   build = https://svn.apache.org/repos/asf/hadoop/core/branches/branch-0.20 -r 763504; compiled by 'ndaley' on Thu Apr  9 05:18:40 UTC 2009  
  9. ************************************************************/  
  10. 11/06/22 08:02:37 INFO namenode.FSNamesystem: fsOwner=shirdrn,shirdrn  
  11. 11/06/22 08:02:37 INFO namenode.FSNamesystem: supergroup=supergroup  
  12. 11/06/22 08:02:37 INFO namenode.FSNamesystem: isPermissionEnabled=true  
  13. 11/06/22 08:02:37 INFO common.Storage: Image file of size 97 saved in 0 seconds.  
  14. 11/06/22 08:02:37 INFO common.Storage: Storage directory /tmp/hadoop/hadoop-shirdrn/dfs/name has been successfully formatted.  
  15. 11/06/22 08:02:37 INFO namenode.NameNode: SHUTDOWN_MSG:   
  16. /************************************************************  
  17. SHUTDOWN_MSG: Shutting down NameNode at localhost/127.0.0.1  
  18. ************************************************************/  
启动：
[plain]  view plain copy
  1. [shirdrn@localhost bin]$ start-all.sh   
  2. starting namenode, logging to /home/shirdrn/eclipse/eclipse-3.5.2/hadoop/hadoop-0.20.0/logs/hadoop-shirdrn-namenode-localhost.out  
  3. localhost: starting datanode, logging to /home/shirdrn/eclipse/eclipse-3.5.2/hadoop/hadoop-0.20.0/logs/hadoop-shirdrn-datanode-localhost.out  
  4. localhost: starting secondarynamenode, logging to /home/shirdrn/eclipse/eclipse-3.5.2/hadoop/hadoop-0.20.0/logs/hadoop-shirdrn-secondarynamenode-localhost.out  
  5. starting jobtracker, logging to /home/shirdrn/eclipse/eclipse-3.5.2/hadoop/hadoop-0.20.0/logs/hadoop-shirdrn-jobtracker-localhost.out  
  6. localhost: starting tasktracker, logging to /home/shirdrn/eclipse/eclipse-3.5.2/hadoop/hadoop-0.20.0/logs/hadoop-shirdrn-tasktracker-localhost.out  
查看：
[plain]  view plain copy
  1. [shirdrn@localhost bin]$ jps  
  2. 8192 TaskTracker  
  3. 7905 DataNode  
  4. 7806 NameNode  
  5. 8065 JobTracker  
  6. 8002 SecondaryNameNode  
  7. 8234 Jps  
grantxx
关注
专栏目录
hdfs 多次格式化报错
Abigal
04-29 1164
报错 20/04/29 19:46:32 WARN namenode.NameNode: Encountered exception during format: org.apache.hadoop.hdfs.qjournal.client.QuorumException: Unable to check if JNs are ready for formatting. 1 exception...
【大数据_报错】格式化报错hdfs-site.xml </configuratiot>; expected </configuration>.
debimeng
02-06 1万+
hadoop3.1在文件格式化报错 场景： 在CentOS 6.8下安装hadoop3.1时，在格式化文件那一步报错，报错如下： # ./bin/hdfs namenode -format WARNING: /opt/hadoop311/logs does not exist. Creating. 2019-02-06 18:03:33,226 INFO namenode.NameNode: ...
hadoop格式化HDFS出现错误解决办法
01-10
hadoop格式化HDFS出现错误解决办法 报错信息： host:java.net.UnknownHostException: centos-wang: centos-wang: unknown error 在执行hadoop namenode -format命令时，出现未知的主机名。  问题原因：     出现这种问题的原因是Hadoop在格式化HDFS的时候，通过hostname命令获取到的主机名与/etc/hosts文件中进行映射的时候，没有找到。 解决方案：     1、修改/etc/hosts内容       2、修改 /etc/sysconfig/network 中
ha环境下重新格式化hdfs报错
weixin_30539625的博客
03-26 280
datanode启动不成功，如下所示，我的136,137.138都是datanode，都启动不了。 查看datanode日志文件发现报错： 一个报错Incompatible clusterIDs in /home/hadoop/data/datanode，需要删除core-site.xml中配置的hadoop.tmp.dir临时目录下的东西。 第二个报错需要删除hdfs-site.xml中...
Hadoop中格式化文件HDFS失败
weixin_54348877的博客
09-28 7108
写在前面： 运行失败的时候，一定要看报错信息！！对症下药。 报错信息： 报错分析： 1. 找到ERROR 在第一行中有个“ ERROR ” ，那我们就从这里开始看，这里后面会告诉你错在哪个文件夹哪行哪里，具体错误是什么 2. SystemId 这里告诉了你在文件（file）中，/export/servers/hadoop-2.7.4/etc/hadoop/mapred-site.xml这个文件出错了。那我们就要切换到文件的目录下，启用vi编辑器查看具体信息。 cd /export/se
Hadoop格式化HDFS报错java.net.UnknownHostException: localhost.localdomain: localhost.localdomain
石头也有呆毛~~
11-14 3839
异常描述 在对HDFS格式化，执行Hadoop namenode -format命令时，出现未知的主机名的问题，异常信息如下所示： java.net.UnknownHostException: localhost.localdomain: localhost.localdomain           at java.net.InetAddress.getLocalHost(InetAdd
hadoop格式化namenode后导致datanode无法启动
阿尼古
04-01 1147
hadoop格式化namenode后导致datanode无法启动 首先贴报错哈，错误不一样，就不用往下看了。。。 报错截图 错误分析 Failed to add storage directory [DISK]file:/Users/zhangchenguang/software/hadoop-2.7.3/tmp/dfs/data/ java.io.IOException: Inco...
格式化HDFS文件系统出现的问题
weixin_30558305的博客
10-01 1254
“Exitting with status 1” 原因应该是权限不够无法再目录内新建文件。 　　先输入命令：sudo su　　获得root权限 　　输入命令：sudo chmod -R a+w ／usr／local／ｈadoop／粗体是自己的安装路径 　　输入命令exit回到普通用户身份　　 此时再在Hadoop的根目录下：hdfs namenode -format 　　成功格式...
hadoop格式化失败-拒绝连接
最新发布
weixin_65195823的博客
05-05 1466
以上就是今天要讲的内容，本文仅仅简单介绍了格式化失败-拒绝连接的原因及解决办法，本文搭建的是hadoop的高可用集群经常会遇到的问题。Hadoop的高可用性：Hadoop的NameNode包括active和standby两种状态，通过故障转移机制（即当active NameNode意外终止时，快速启动stantby NameNode）可保证HDFS的高可用性。
hdfs格式化
BigData私房菜
04-26 2212
当集群突然关闭，造成datanode无法启动，一个比较便捷的方法就是直接格式化hdffs,前提是里面的数据都可以删除 每个节点进入保存数据的文件夹，可以再配置文件中查看，namenode该目录下有name文件夹，datanode下有data文件夹，每个节点都要删除，删除后再在namenode下载执行 hdfs namenode -format hadoop namenode -format；曾...
linux中hdfs格式化,HDFS操作命令
weixin_28928039的博客
05-13 4720
总结：上传文件：put、copyFromLocal、moveFromLocal下载文件：get、copyToLocal、moveToLocal查看文件：text、cat、tail合并文件：getmerge命令详解HDFS命令基本格式：hadoop fs -cmd < args >表格：选项名称使用格式含义-ls-ls 查看指定路径的当前目录结构-lsr-lsr 递归查看指定路径的目录结...
HDFS源码分析——格式化
坐禅小和尚的专栏
09-24 1190
HDFS NameNode保存了两个元数据文件fsimage和edits。如果想要对文件系统进行格式化，应该进行哪些操作呢？按照我们的理解，首先要把已有的fsimage和edits全部删除；其次，重新建立新的fsimage和edits；最后，通知所有的datanode，命令其删除相应的数据。通过阅读HDFS的源程序，我们得知，前两部是HDFS已经实现的；但是，其好像没有通知datanode进行数据
Hadoop格式化后出现异常
08-17 1683
我在正常安装Hadoop 格式化后正常启动，在安装成功后再次格式化就出现了异常，解决方案从如下论坛中找到http://forum.hadoop.tw/viewtopic.php?f=4&t=43
HDFS配置及常见命令
IT_Octopus的博客
06-11 1269
HDFS是Hadoop中用来存储文件的。 1、HDFS 是做什么的 HDFS（Hadoop Distributed File System）是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础，是基于流数据模式访问和处理超大文件的需求而开发的，可以运行于廉价的商用服务器上。它所具有的高容错、高可靠性、高可扩展性、高获得性、高吞吐率等特征为海量数据提供了不怕故障的存储，为超大数据集（La...
hadoop中格式化HDFS失败的解决办法
热门推荐
qq_38712026的博客
03-02 1万+
        安装Hadoop过程中，遇HDFS格式化失败，报错如下：         找了下网上的资料，大家出错的情形都略为奇葩。中有format误写为formate，有-format中前面的横线应用中文输入法横线的。。。我属于后者，换为横线。    再次格式化之后，出现INFO common.Storage: Storage directory /home/grid/hadoop-2.7.5...
DEPRECATED: Use of this script to execute hdfs command is deprecated。
now
10-29 7850
DEPRECATED: Use of this script to execute hdfs command is deprecated. Instead use the hdfs command for it. 不推荐：不推荐使用此脚本执行hdfs命令。 而是使用hdfs命令。 本人安装的hadoop版本是2.4.0的，但每次执行命令时都会显示下面的信息 hadoop@VM_160_34_centos:/usr/local/hadoop-2.4.0> hadoop dfs -ls ..
Hadoop2.5.2完全分布式集群安装
ych0108的博客
08-21 331
《Hadoop2.5.2集群安装》 1、环境介绍 操作系统：CentOS X64 6.5 物理机器：192.168.170.130(node1)、192.168.170.131(node2)、192.168.170.132(node3) JDK版本：JDK7.X Hadoop版本：Hadoop2.5.2 2、修改主机名称和host名称 通过命令“hostname”查看当前...
Hadoop集群塔建常见bug
qq_53905637的博客
10-09 1875
分享一些自己踩过的坑（呜呜呜）
hdfs zkfc -formatzk报错
03-16
"hdfs zkfc -formatzk" 报错可能是由于以下原因之一： 1. 您没有足够的权限运行该命令。请检查您当前使用的用户是否具有执行此命令的权限。 2. ZooKeeper 未正确配置。请检查 ZooKeeper 的配置文件和 Hadoop 的配置文件是否正确配置，并确保它们都可以互相访问。 3. ZooKeeper 已经格式化过了。请检查您是否已经运行过这个命令，如果是，请尝试删除 ZooKeeper 中的相关数据并重新运行该命令。 请检查以上三个原因，以确定造成报错的具体原因，并做相应的调整。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值