- 博客(3)
- 收藏
- 关注
RSS订阅原创 Hadoop之namenode和datanode通信机制
通信导图注：如果namenode检测到某台节点停止的心态汇报，则会持续再检测十次，如果还没有的话会在五分钟后ping该节点，ping不通的话会在等五分钟再次ping，如果还是ping不通的话则宣布该节点宕机。宣布一台节点宕机用时10分30秒！...
2020-09-11 11:29:18
696
原创 Hadoop之HDFS上传数据流程，简单明了
简单描述HDFS上传数据的流程并附简易图：HDFS上传文件流程（写数据流程）：1.比如客户端现在需要上传一个300M的文件，客户端得先请求namenode，告诉它我要上传这个300M的文件。2.namenode会根据datanode注册时汇报自己的存储状态来判断客户端能否上传，能的话会返回一个OK给客户端。3.这是客户端会根据自己的文件大小物理切快（默认以128M切割），再请求namenode，请求上传第一块数据。4.namenode收到请求后会根据datanode的存储状态，向客户端返回可用的三
2020-08-16 21:18:45
1087
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人