- 博客(1)
- 收藏
- 关注
转载 HDFS dfsclient写文件过程 源码分析
HDFS写入文件的重要概念 HDFS一个文件由多个block构成。HDFS在进行block读写的时候是以packet(默认每个packet为64K)为单位进行的。每一个packet由若干个chunk(默认512Byte)组成。Chunk是进行数据校验的基本单位,对每一个chunk生成一个校验和(默认4Byte)并将校验和进行存储。 在写入一个block的时候,数据传输的基本单位是pa...
2014-09-23 14:57:00 95
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人