Hadoop:DataNode工作图解
记录hadoop学习之旅的问题和笔记,89lovelc,加油
DataNode 工作机制图解
- 1.一个数据块在 datanode 上以文件形式存储在磁盘上,包括两个文件,一个是数据本身,一个是元数据包括数据块的长度,块数据的校验和,以及时间戳
- 2.DataNode 启动后向 namenode 注册, 通过后,周期性(1 小时) 的向 namenode 上报所有的块信息。
- 3.心跳是每 3 秒一次,心跳返回结果带有 namenode 给该 datanode 的命令如复制块数据到另一台机器,或删除某个数据块。
- 4.如果超过 10 分钟没有收到某个 datanode 的心跳,则认为该节点不可用