大数据之HDFS读写流程介绍

---

前言

#博学谷IT学习技术支持#
上篇文章主要介绍了HDFS框架中的三大角色，本次主要介绍HDFS的读写流程和，让大家对HDFS有更深一步的了解。

一、HDFS的写流程

（一）相关角色介绍

HDFS写流程相关角色主要有Client端，NameNode和DataNode；
（1）Client端的作用主要是发起一些请求，将文件进行切片以及与DataNode进行数据传输；
（2）NameNode则是进行一些权限检查和返回用于存储数据的DataNode列表；
（3）DataNode相对于其他两个角色来说工作比较简单，就是存储Client端上传的数据。

（二）写流程介绍

读流程主要分为上图中的10个步骤，结合上图进行以下说明：
①Client端发起文件上传请求给NameNode
②NameNode进行权限检查，检查是否有操作权限，即将接收文件的文件夹是否存在
③NameNode会返回一个是否可以上传的注记
④如果NameNode返回可以上传的注记，Client会对文件进行切片
⑤文件切片完成后，Clinet端会向NameNode发起Block上传请求
⑥NameNode根据策略以及主机的优秀程度选出最优的主机
⑦Na