FSimage与EditLog合并的过程

  1. Secondry NameNode每个周期(15min)询问Edit文件的大小。
  2. 当Edit文件达到合并阈值时,namenode停止使用Edit文件,并建立一个Edit.new的新文件。
  3. Secondary NameNode通过get请求得到fsimage文件和edit文件,执行edit文件中的操作,结果存入新的fsimage文件。
  4. 合并完成后通知namenode,namenode发送post请求,得到合并后的fsimage文件,并将其重命名。
  5. 将edit.new文件更名为edit文件。

  secondary namenode可以在namenode宕机后,根据自己的这份fsimage文件对其进行恢复,所以需要将其另部一台机器。

另外:
  datanode和namendoe通过心跳机制保持联系,datanode每3s向name发送一次数据信息,如果超过3s NameNode没有收到datanode发来的心跳,就会将这个节点的数据向其他节点拷贝一份。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值