DataNode工作原理

本文详细介绍了HDFS中DataNode的工作机制,包括DN启动时的注册、心跳机制以及NN如何判断DN是否可用。还讨论了DN的超时时间计算,并详细阐述了在不停止HDFS服务的情况下,如何安全地添加新DN节点和退役旧DN节点的步骤。
摘要由CSDN通过智能技术生成

DataNode工作机制

在这里插入图片描述

  1. DN在启动的时候,向NN注册自己。

    如果没有注册成功的,直接认定不可用。

  2. NN接收注册,把DN的数据信息记录下来,反馈回去(注册成功)

  3. DN每隔3秒钟(心跳机制)与NN进行一次数据传输

    目的是为了证明当前DN可以使用

  4. 如果5分钟没有接收到心跳,NN主动寻找DN,达到10分钟没有找到,可以认定当前DN不可用

    (即使没有宕机,网络过慢也不适合继续使用)

  5. DN每隔一小时与NN汇报一次工作,上报块信息

注意:

hdfs-site.xml 配置文件中的heartbeat.recheck.interval的单位为毫秒,dfs.heartbeat.interval的单位为秒。

  1. 每隔3秒钟进行一次心跳机制

    <property>
    
    	<name>dfs.heartbeat.interval</name>
    	
    	<value>3</
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值