before
- 从迅雷上下载数据,有时下载的数据是坏的
- 下载的东西不靠谱,我们不知道,下载下来才知道
- 下载的数据的完整性
after
- 加入一个校验位,怎么样工作?我就认为你这个数据是不可靠的,我会让你重新给我发一个
理论
- dn启动后向nd注册,相当于nacos
- 给返回注册成功
- 以后每隔一个小时,上报所有的块信息
- 心跳每三秒一次,带有namenode给改datanode的命令
- 超过十分钟没有收到dn的心跳,认为该节点不可用
怎么判定节点死亡?
timeout = 2* 变量(五分钟) + 心跳间隔* 10
什么叫校验和?
下载的时候这个文件是否损坏的?
经过网络传输,这个数据不可靠,解压的时候根据不告诉你坏了
什么是校验失效?
什么是crc校验算法?
给他一串数据,他就给你算成一个字符串,越长越靠谱,算出来的校验值,校验值碰撞,减低这种碰撞,长了有什么代价,消耗的cpu高,传输的代价比较高,合适比较好。
这种算法的特点是只要有一个字节的变化,这个值会有剧烈的变化