lixiaoksi的博客

Spark内置RPC框架RPC框架的基本架构TransportContext内部包含传输上下文的配置信息 TransportConf 和对客户端请求消息进行处理的RPCHandler。

闲来无事，看到了updateStateByKey&mapWithState两个算子，本着学而不思则罔，思而不学则殆的精神， 写了个小demo测试了一下加深印象，将他们收入脑中updateStateByKey按照惯例，首先来看官网解释1：updateStateByKey算子归属于 Transformations on DStreams。2：需要一个func作为入参，通过对之前 "state" 的每个key作用于这个func，返回一个 “新状态” 的DStream /**

spark源码阅读https://juejin.im/post/5d19d133f265da1b971a8c06