本文以漫画形式生动解析Hadoop HDFS的写数据流程，包括文件切分、数据复制和DataNode的选择。读数据流程中，Namenode提供DataNode地址，客户端按顺序访问获取数据。同时，介绍了HDFS面对DataNode故障的处理机制，确保数据的可靠性。
首先看看出场的角色，第一个是client客户端，用来发起读写请求，读取HDFS上的文件或往HDFS中写文件；第二个是Namenode，唯一的一个，会协调所有客户端发起的请求；第三个是DataNode，负责数据存储，跟Namenode不一样，DataNode有很多个，有时候能达到数以千计。
写数据流程
往HDFS中写数据的流程如下：
第1幅图：我们跟客户端说，你帮我写一个200M的数据吧，客户端说没问题啊，但是…
第2幅图：客户端不知道我们对数据有没有其他的要求啊，问我们是不是忘了什么东西呢？我们想起来我们还是有要求的，第一我们要把数据分成若干块，并且每块的大小是128M，第二，每个数据块应该复制3份。其实这就是我们说的HDFS的文件分块和
最低0.47元/天 解锁文章
扫一扫
583
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
