【HDFS】IPC重试

叹了口丶气

于 2023-03-09 11:44:40 发布

阅读量453

点赞数

分类专栏： HDFS全方位实战文章标签： hdfs hadoop 大数据

本文链接：https://blog.csdn.net/yexiguafu/article/details/129361534

版权

HDFS全方位实战专栏收录该内容

176 篇文章 153 订阅 ¥29.90 ¥99.00

订阅专栏

本文探讨了HDFS中IPC重试与dfs.client.retry的区别，详细解析了IPC重试的相关参数，包括ipc.client.connection.maxidletime和ipc.client.connect.max.retries。通过源码分析，阐述了连接超时和异常处理时的重试逻辑，以及Client和Server侧的处理策略。

摘要由CSDN通过智能技术生成

1、IPC重试和dfs.client.retry重试的区别
2、IPC重试的相关参数汇总及含义
3、 IPC重试相关源码、原理

简单总结一句话：
IPC重试是因为连接问题而进行重试；
客户端重试是因为RPC在服务端处理发生异常，客户端根据指定的策略进行重试。

接下来让我们深入一下源码，因为每一部分源码都比较多，因此我准备分两篇文章梳理下。
1、IPC重试。
2、dfs.client.retry客户端重试。

一、与重试相关的配置项

类型	配置项	默认值	含义
IPC重试	ipc.client.connect.max.retries	10	client与server建立连接的最大重试次数
IPC重试	ipc.client.connect.max.retries.on.timeouts	45	client与server建立连接scoket timeout的最大重试次数
IPC重试	ipc.client.connection.maxidletime	10000	客户端的Connection超过此值没有请求处理，断开与服务器连接