hdfs
BigCabbageFy
这个作者很懒,什么都没留下…
展开
-
大数据笔记 1--hadoop中的hdfs写数据流程详解
上图是一个简版的流程图,图画的不标准,但能说明问题就OK,下面是根据上图描述的写数据流程,如有不对的地方请指教。 注:以下简化名称所对应的全称: NN == NameNode; IO == hdfsFileoutputStream; DN == DataNode; DN1 == DataNode1; DN2 == DataNode2; DN3 == DataNode3; 详细流程 1、当需要向H...原创 2018-09-27 19:39:54 · 365 阅读 · 0 评论 -
大数据笔记 2--hdfs读数据流程
注:以下简化名称所对应的全称: NN == NameNode; IO == hdfsFileinputStream; DN == DataNode; DN1 == DataNode1; DN2 == DataNode2; DN3 == DataNode3; 详细流程: 1、客户端向NN发送一个带有相关文件的路径请求,例如hdfs://input/xx.txt这样的一个读文件请求; 2、NN会在元...原创 2018-09-27 20:24:35 · 286 阅读 · 0 评论