《Hadoop管理四》从Secondary Namenode恢复Namenode

介绍如何从Secondary Namenode的checkpoint点恢复Namenode,对于以后理解从Checkpoint Node 和Backup Node恢复很有帮助。

在core-site.xml的配置文件中,设置了checkpoint的时间间隔、大小限制和存储位置。

<property>
  <name>fs.checkpoint.dir</name>
  <value>${hadoop.tmp.dir}/dfs/namesecondary</value>
  <description>Determines where on the local filesystem the DFS secondary
      name node should store the temporary images to merge.
      If this is a comma-delimited list of directories then the image is
      replicated in all of the directories for redundancy.
  </description>
</property>




<property>
  <name>fs.checkpoint.period</name>
  <value>3600</value>
  <description>The number of seconds between two periodic checkpoints.
  </description>
</property>

<property>
  <name>fs.checkpoint.size</name>
  <value>67108864</value>
  <description>The size of the current edit log (in bytes) that triggers
       a periodic checkpoint even if the fs.checkpoint.period hasn't expired.
  </description>
</property>

如果在规定时间内没有edits 大小没有达到上限,则Hadoop会强制执行checkpoint过程,如果没有达到时间间隔但是edits大小已经达到上限,则也会强制执行checkpoint过程。

 

 

恢复过程如下:

1. 将dfs.name.dir所指向的文件夹下的内容全部删掉。 rm -rf *

2. 将Secondary Namenode节点上core-site.xml配置文件中fs.checkpoint.dir指定路径下的文件到Namenode节点上core-site.xml配置文件中fs.checkpoint.dir指定的路径下

3. 执行 bin/hadoop namenode –importCheckpoint(需要较长的时间,需要加载到内存中)

4. 执行 bin/hadoop fsck /

5. 删除Namenode节点的namesecondary目录下的文件

6. 启动Namenode守护进程。bin/hadoop-daemon.sh start namenode

7. 执行balancer。 bin/hadoop balancer 

转载于:https://www.cnblogs.com/hanyuanbo/archive/2012/07/25/2608894.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值