SecondaryNameNode(2NN)工作机制

NameNode 作用是:管理HDFS的名称空间,管理Block映射信息,配置副本策略,处理客户端读写请求

2NN并非是NameNode热备,他的作用是,辅助namenode工作,定期合并镜像文件和编辑日志,紧急情况下恢复NameNode

个人理解就是,2nn帮助namenode完成edits向fsimage的合并工作。edits.inprogress记录每一步具体操作,并另命名编号保存,fsimage是edits的集合压缩包。

工作流程如下

Namenode中

启动NameNode时,加载编辑日志Edits和镜像文件fsimage到内存(第一次启动创建镜像文件和编辑日志)

客服端发起增删改查请求

namenode上编辑日志Edits开始滚动,记录请求

namenode执行请求

SecondaryNameNode中

2nn向NameNode询问是否chinkpoint请求(满足触发条件1定时2edits占内存达到一定数值)

NameNode反馈是否同意执行

开始执行时,Namenode中滚动编辑日志edits.inprogress,生成最新编号日志比如edits.12138和生成新的空的edits.inprogress

将所有镜像文件和编辑日志拷贝到2nn

2nn将编辑日志和镜像文件加载到内存并合并

生成新的镜像文件fsimage.chkpoint

拷贝镜像文件fsimage.chkpoint回NameNode

NameNode中重新命名为fsimage并覆盖掉旧的

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值