Spark源码
gssgch
更多视频,欢迎访问:https://space.bilibili.com/383891492
展开
-
spark源码 -- spark ListenerBus 监听器
Spark 源码中对livelistenerBus进行了这样的注释:即所有spark消息SparkListenerEvents 被异步的发送给已经注册过的SparkListeners. 在SparkContext中, 首先会创建LiveListenerBus实例,这个类主要功能如下:保存有消息队列,负责消息的缓存保存有注册过的listener,负责消息的分发listener链表保存在Listene...转载 2018-07-09 21:30:10 · 330 阅读 · 0 评论 -
Spark最新2.x源码一SparkRPC背景简介--sparkRPC的发展演化史
版权声明:本文为博主原创文章,未经博主允许不得转载!! 欢迎访问:https://blog.csdn.net/qq_21439395/article/details/82817475 交流QQ: 824203453 Spark RPC简介 RPC(Remote Procedure Call Protocol)--远程过程调用协议 RPC是分布式项目的基石,Spark RPC被dep...原创 2018-09-22 20:49:52 · 353 阅读 · 0 评论