Hadoop之HDFS

 一、HDFS的组成架构

NameNode:存储一些元数据信息,管理数据块的映射信息,处理客户端的请求

DataNode:存储一些真实的数据块,执行数据块的读/写操作

Secondary NameNode:主要是做一个数据备份,辅助NameNode分担其工作量

二、Hadoop的写流程

 文字版描述:

         由客户端向NameNode发起一个上传文件的的申请,NameNode接收到这个请求以后会对这个请求进行一个基本的验证,验证内容包括对请求上传的路径的合法性进行验证其次还要对请求的用户进行权限验证,如果验证没有问题的话,NameNode会对客户端发起的请求进行一个响应,其实就是NameNode告诉客户端可以上传文件了。客户端此时对对我们上传的那个文件进行一个切块,按照blocksize大小进行切块,切完块后按照块的的顺序开始上传数据块,NameNode会返回给客户端DataNode节点数量,客户端会根据机架感知找到其中一台机器建立通道,然后由这台机器向后面的机器简历通道,并且客户端返回给Name

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值