HDFS-FSImage类

FSImage类主要由三部分功能,将内存映像持久化到磁盘,将映像文件加载到内存,生成内存命名空间,
加载editLog文件到内存命名空间。

先看一下映像文件的Format:

真正用于存储数据节点信息的是FileSummary,INode和INodeDirectory等都对应一个section.有对应的
FileSummary类,其内部有一个List<Section>。相关结构的说明见《Hadoop 2.X HDFS源码剖析》中
3.1.4小节关于FSImage类的说明。

在这里插入图片描述

持久化到磁盘:
  该逻辑的入口是,FSNameSystem调用FSImage的saveNamespace()方法。
加载映像文件:
 该逻辑的入口是,loadFSImage()
加载日志文件:
该逻辑的入口是,loadEdits,最终FSEditLogLoader.loadFSEdits()会使用EditLogInputStream对象读取并
加载editlog文件,这个方法的操作比较冗长,基本可以归纳为从editLog文件中读取一个操作,并使用
FSEditLogOp对象封装,然后调用applyEditLogOp()方法修改Namenode的命名空间。
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值