Spark2.3.3源码解析——RPC框架初始化详解
作为分布式系统的spark rpc通信是一个很重要的课题。在spark2.3.3版本中rpc框架已经由akka替换成netty实现。接下来我们先介绍一下spark rpc中的组件,然后根据sparkcontext初始化过程来分析rpc组件如何初始化和使用原理。
在spark中定义transportclient和transportserver来封装netty的channe...
原创
2019-07-29 09:59:31 ·
683 阅读 ·
0 评论