Hadoop1重新格式化HDFS

注意:原来的数据全部被清空了。产生了一个新的hdfs

1. 删除已有目录

1.1 查看hdfs-site.xml

将 dfs.name.dir和dfs.data.dir所指定的目录删除

vim hdfs-ste.xml

 <span style="font-size:18px;"><property>  
  <name>dfs.name.dir</name>  
  <value>/home/hadoop/hdfs/name</value>  
  <description>namenode上存储hdfs名字空间元数据</description>  
 </property>  
   
 <property>  
  <name>dfs.data.dir</name>  
  <value>/home/hadoop/hdsf/data</value>  
  <description>datanode上数据块的物理存储位置</description>  
 </property></span>

1.2 查看core-site.xml

将Hadoop.tmp.dir所指定的目录删除。

vi core-site.xml

<property>  
<name>hadoop.tmp.dir</name>  
<value>/home/hadoop/hadooptmp</value>  
<description>namenode上本地的hadoop临时文件夹</description>  
</property> 

2.删除历史HDFS,重新格式化

hadoop namenode -format

完成。

转载于:https://www.cnblogs.com/fefjay/p/6044456.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Hadoop集群搭建中,格式化HDFS的具体过程如下: 1. 打开终端或命令行界面,通过SSH登录到Hadoop集群的主节点上。 2. 确保Hadoop集群的所有节点都正常运行,并且网络连接正常。 3. 进入Hadoop的安装目录,通常为`/opt/hadoop/`或自定义的目录。 4. 找到`hadoop/bin`目录下的`hdfs`脚本文件,执行以下格式化命令: ``` ./hdfs namenode -format ``` 这将启动HDFS格式化过程。 5. 格式化过程会生成初始的文件系统元数据,同时会清空HDFS上的所有数据。在执行格式化命令时,系统会提示确认是否继续。输入`Y`或`yes`确认继续。 6. 格式化过程可能需要一些时间,具体时间取决于Hadoop集群的规模和配置。期间可以观察终端输出,以了解格式化的进度和状态。 7. 格式化完成后,可以通过执行以下命令启动HDFS服务: ``` ./start-dfs.sh ``` 这将启动HDFS的各个组件,包括NameNode、Secondary NameNode和DataNode。 8. 可以通过执行以下命令验证HDFS的状态: ``` ./hdfs dfsadmin -report ``` 这将显示HDFS集群的状态信息,包括NameNode的活跃状态、DataNode的数量等。 完成上述步骤后,HDFS就已经成功格式化并启动。可以通过执行一些HDFS相关的命令或运行示例程序,验证Hadoop集群的正常运行。 需要注意的是,格式化HDFS会清空HDFS上的所有数据,请确保在执行格式化命令之前进行备份,并确保确认操作无误。此外,格式化HDFS只需要在集群首次搭建或重新搭建时执行一次,后续的启动不需要再进行格式化操作。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值