HDFS（四）----DataNode工作机制

----尚硅谷笔记学习整理

一、DataNode工作机制

1、一个数据块在DataNode上以文件形式存储在磁盘上，包括两个文件，一个是数据本身，一个是元数据包括数据块的长度、快数据的校验和，以及时间戳，

2、DataNode启动后向NameNode注册，通过后，周期性的向NameNode上报所有的块信息

3、心跳是每三秒一次，心跳返回结果带有NameNode给该DataNode命令如复制块数据到另一台机器，或删除某个数据块，如果超过10分钟没收到某个DataNode的心跳，则认为该节点不可用

4、集群运行中可以安全加入和退出一些机器

二、DataNode如何保证数据完整性

1、当DataNode读取Block时候，会计算CheckSum

2、如果CheckSum与Block创建时值不一样，说明Block已经损坏

3、客户端读取其它DataNode上的Block

4、DataNode在其文件创建后周期验证CheckSum

三、黑白名单

1、添加白名单步骤

2、添加黑名单步骤