qq_45935054的博客

原创 Hadoop--hdfs文件系统写入流程

4.namenode 收到请求后，会根据网络拓扑，机架感知和副本机制进行文件分配，返回可用的datanode节点地址 ，hadoop 中 数据文件默认会存储3份，而文件的存储策略 是 datanode节点写入第一份数据同时，会在同机架的另一个随机机器上写入一份另一台机架上的随机一个机器写入数据。3.客户端会根据文件大小对其进行拆分，保存在一个个block块中，一个block块默认的size为128M，当拆分完成后，客户端向namenode申请第一个block块的上传的服务器节点（datanode）地址。