![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hdfs
BigCabbageFy
这个作者很懒,什么都没留下…
展开
-
大数据笔记 1--hadoop中的hdfs写数据流程详解
上图是一个简版的流程图,图画的不标准,但能说明问题就OK,下面是根据上图描述的写数据流程,如有不对的地方请指教。注:以下简化名称所对应的全称:NN == NameNode;IO == hdfsFileoutputStream;DN == DataNode;DN1 == DataNode1;DN2 == DataNode2;DN3 == DataNode3;详细流程1、当需要向H...原创 2018-09-27 19:39:54 · 365 阅读 · 0 评论 -
大数据笔记 2--hdfs读数据流程
注:以下简化名称所对应的全称:NN == NameNode;IO == hdfsFileinputStream;DN == DataNode;DN1 == DataNode1;DN2 == DataNode2;DN3 == DataNode3;详细流程:1、客户端向NN发送一个带有相关文件的路径请求,例如hdfs://input/xx.txt这样的一个读文件请求;2、NN会在元...原创 2018-09-27 20:24:35 · 287 阅读 · 0 评论