本文详细介绍了Hadoop HDFS中文件上传和下载的过程。文件上传时，客户端首先向NameNode请求上传路径，然后NameNode提供DataNode地址，客户端将文件分块并逐个上传至DataNode。文件下载时，客户端请求NameNode获取文件存储信息，依次从DataNode下载数据块并本地拼接完成文件下载。
文件上传:
1.客户端向NameNode(NN)发送请求上传文件路径
2.NN响应Client确认是否能够上传文件
3.Client再次请求NN,上传一个Black块
4.NN响应Client给予几个要上传的DataNode的地址(有一定的容灾规则)
5.Client向第一个DataNode请求建立连接进行文件上传,第一个DataNode会向第二个DataNode请求建立连接传输文件
依次到最后一个,通知Client进行文件的传输
6.Client会将文件分成每个64k的小块进行传输(方便副本间同步,前后副本仅仅差距一个包)
7.Client上传结束后,如果还有Black块,继续重复3-6过程.直到传输结束
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
