HDFS架构和组成

37 篇文章 1 订阅
14 篇文章 0 订阅

HDFS架构和组成

Hdfs 采用Master/Slave的架构来存储数据,这种架构主要由四个部分组成NameNode, DataNode,client,和SencondayNameNode组成
在这里插入图片描述

NameNode(Master):
管理 HDFS 的命名空间,维护元数据。
接收客户端的请求。
管理数据块(Block)映射信息.
配置副本策略
DataNode(Slave):
存储实际的数据块 。
执行数据块的读/写操作。
向namenode上传心跳信息。
Client(客户端):
1、文件上传 HDFS 的时候,Client 将文件切分成Block,然后进行存储。
2、与 NameNode 交互,获取文件的位置信息。
3、与 DataNode 交互,读取或者写入数据。
4、Client 提供一些命令来管理 HDFS,比如启动或者关闭HDFS。
SencondayNameNode(辅助工作者):
1、辅助 NameNode,分担其工作量。
2、定期合并 fsimage和fsedits,并推送给NameNode。
3、在紧急情况下,可辅助恢复 NameNode。
在这里插入图片描述
公众号:大数据面试宝典 修改简历,面试辅导,回复888领取面试宝典资料
在这里插入图片描述

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值