本文详细介绍了HDFS的读写流程。在读取过程中，客户端首先向NameNode查询文件位置，随后选择DataNode读取数据并缓存到本地。在写入时，客户端先请求NameNode确认文件上传，接着建立DataNode之间的通信管道，逐级上传Block并等待应答。
HDFS读流程
（1）客户端通过DistributedFileSystem向NameNode请求下载文件，NameNode通过查询元数据，找到文件块所在的DataNode地址。
（2）挑选一台DataNode（就近原则，然后随机）服务器，请求读取数据。
（3）DataNode开始传输数据给客户端（从磁盘里面读取数据输入流，以Packet为单位来做校验）。
（4）客户端以Packet为单位接收，先在本地缓存，然后写入目标文件
---------------------------------------------------------------------------------------------------------------------------------
<
最低0.47元/天 解锁文章
扫一扫
592
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
