hadoop之——datanode节点超时时间设置

最新推荐文章于 2021-02-27 22:09:54 发布

冰河

最新推荐文章于 2021-02-27 22:09:54 发布

阅读量2k

点赞数 1

分类专栏：精通大数据系列文章标签： hadoop datanode

本文链接：https://blog.csdn.net/l1028386804/article/details/51935131

版权

精通大数据系列专栏收录该内容

269 篇文章 88 订阅

订阅专栏

转载请注明出处：http://blog.csdn.net/l1028386804/article/details/51935131

datanode进程死亡或者网络故障造成datanode无法与namenode通信，namenode不会立即把该节点判定为死亡，要经过一段时间，这段时间暂称作超时时长。HDFS默认的超时时长为10分钟+30秒。如果定义超时时间为timeout，则超时时长的计算公式为：

 timeout  = 2 * dfs.namenode.heartbeat.recheck-interval + 10 * dfs.heartbeat.interval。

而默认的dfs.namenode.heartbeat.recheck-interval 大小为5分钟，dfs.heartbeat.interval默认为3秒。需要注意的是hdfs-site.xml 配置文件中的dfs.namenode.heartbeat.recheck-interval的单位为毫秒，dfs.heartbeat.interval的单位为秒。

所以，举个例子，如果dfs.namenode.heartbeat.recheck-interval设置为2000（毫秒），dfs.heartbeat.interval设置为1（秒，默认），则总的超时时间为14秒。

hdfs-site.xml中的参数设置格式：

<property>
        <name>dfs.namenode.heartbeat.recheck-interval</name>
	<value>2000</value>
</property>
<property>
	<name>dfs.heartbeat.interval</name>
	<value>1</value>
</property>