Hadoop RPC是Hadoop分布式系统中节点间通信的关键技术，它提供了一种轻量级、高效的远程过程调用协议。RPC允许本地程序像调用本地方法一样调用远程服务，其特性包括使用IPC模型、Java NIO、动态代理和protobuf等。Hadoop的多种核心协议如ClientProtocol、DatanodeProtocol等都基于RPC实现，确保了集群内的高效协作。
1 Hadoop RPC概述
1.1 基本概念
是什么：
RPC：Remote Procedure CallProtocol，远程过程调用协议。
有什么用：
允许本地程序像调用本地方法一样调用远程机器上应用程序提供的服务。
为什么引入：
Hadoop作为分布式存储系统，各个节点之间的通信和交互是必不可少的，所以需要实现一套节点间的通信交互机制。
Hadoop中通信接口一共有两类：一类就是本文档中要介绍的RPC接口；另一类是基于TCP或者HTTP实现的流式接口，比如客户端与数据节点以及数据节点与数据节点之间的数据块传输是基于TCP流式接口实现的，Standby Namenode将合并的fsimage回传给Active Namenode是基于HTTP流式接口实现的。
Hadoop中RPC特性：
最低0.47元/天 解锁文章
扫一扫
339
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
