Hadoop之——重新格式化HDFS的方案

了解Hadoop的同学都知道,Hadoop有两个核心的组成部分,一个是HDFS,另一个则是MapReduce,HDFS作为Hadoop的数据存储方案,MapReduce则提供计算服务;同时,HDFS作为一种分布式文件系统,它的安装也是需要相应的格式化操作的,如果安装失败或者我们需要重新安装的时候,那我们就需要对HDFS重新进行格式化,这篇文章就和大家一起讨论下如何进行HDFS的重新格式化。
重新格式化hdfs系统的方法:

1.把配置文件修改正确

2.停止hdfs服务(使用jps命令查看是否有  nameNode,dataNode,secondary nameNode三个进程)

  进入 sbin目录中 执行

  sh stop-dfs.sh 

如果使用jps 查看还有这三个进程中有一个进程没有关闭,那使用kill -9 进程号 去关闭进程

3、查看hdfs-site.xml配置的路径
我们打开Hadoop的hdfs-site.xml,基本配置如下所示:

<property>
   <name>dfs.name.dir</name>
   <value>file:///data/hadoop/hdfs/name</value>
</property>
<property>
   <name>dfs.data.dir</name>
   <value>file:///data/hadoop/hdfs/name</value>
</property>
 将 dfs.name.dir所指定的目录文件夹删除、dfs.data.dir所指定的目录文件夹在系统中删除(不要修改配置文件!)
4、删除core-site.xml配置文件指定的相关目录,主要不要修改配置文件!!
 <property>
     <name>hadoop.tmp.dir</name>
     <value>/usr/local/hadoop-2.6.4/tmp</value>
 </property>
 将hadoop.tmp.dir所指定的目录在系统中删除(不要修改配置文件!)。

5.不要忘记重新新建/tmp文件夹


6、重新执行命令:hdfs  namenode -format
格式化完毕。


这种格式化HDFS的方式是需要把原来HDFS中的数据全部清空,然后再格式化并安装一个全新的HDFS。
注:这种格式化方式需要将HDFS中的数据全部清空,以后我们探讨不需删除数据即可重新格式化的方法。
 

  • 1
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值