2020-11-17

HDFS体系结构

  • HDFS体系结构

  • HDFS由一个Namenode、一个Secondary NameNode、若干Datenodes和Client组成,采用主从结构,存储的基本单位是块。

  • 1.(1)HDFS把一个文件被分成多个块,以块为存储单位,默认一个块为64~128MB。

  • (2)HDFS采用抽象的块概念可以带来以下几个明显的好处:支持大规模文件存储;简化系统设计;适合数据备份。

    2.NameNode(主节点)

  • (1)储存元数据:文件、块与DateNode之间的映射。

  • (2)元数据保存在内容。

  • (3)NameNode由Fslmage、EditLog两个文件组成。Fslmage保存文件、块的目录结构;EditLog保存对文件、块的操作,如创建、删除等。

  • (4)在NameNode统一调度下进行数据块的创建、删除和复制等操作。

  • NameNode管理文件系统的命名空间。它维护着文件系统树及整棵树内所有的文件和目录。这些信息以两个文件形式永久保存在本地磁盘上:命名空间镜像文件和编辑日志文件。NameNode也记录着每个文件中各个块所在的数据节点信息,但它并不永久保存块的位置信息,因为这些信息在系统启动时由数据节点重建。

  • HDFS体系结构①

  • HDFS体系结构②

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值