Hadoop对于读流程和写流程的图解和解释

Hadoop的读流程和写流程究竟是怎么回事呢?
看下面:

一、读流程
 
解释:
1、客户端向NameNode发起请求,需要获取名字为x的数据块 
2、NameNode中保存了该数据块存储的位置,将DataNode的信息返回给客户端 
3、客户端就近的方式去从DataNode获取数据 
4、如果某个DataNode无法访问 
5、从另一个DataNode中去获取数据 


总结:向namenode发送请求,从它获得该数据块存储的信息,信息返回给客户端
          从而获取数据

二、写流程



解释:
1、客户端向NameNode发起请求,需要存储数据Data 
2、因为NameNode中是记录了所有DataNode的相关信息的,而数据最终要保存的地方就是DataNode,所以NameNode会返回可用的             DataNode的信息给客户端 
3、将Data分为1和2这两个数据块 
4、客户端会将数据块存储到NameNode返回给他的DataNode1中去 
5、因为数据块需要存储多份,所以DataNode之间会相互传输来进行存储 
6、DataNode存储完数据后,会反馈给NameNode,NameNode会将对应的DataNode的相关信息进行更新 


总结:
            客户端向namenode发送请求,namenode返回可用的datanode信息给客户端,
            客户端会将数据块存储导datanode,并备份,然后datanode存储完数据会反馈给namenode。




 

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值