Spark源码学习
通过Spark源码来学习Scala
Dream2World
这个作者很懒,什么都没留下…
展开
-
Spark源码精读一线程池之消息派发线程池
线程池消息派发器中的线程池“dispatcher-event-loop”混洗数据客户端线程池“shuffle-client”Netty的超时调度器“netty-rpc-env-timeout”Netty的RPC连接线程池“netty-rpc-connection”混洗数据服务端的线程池“shuffle-server” 消息派发器中的线程池“dispatcher-event-loop” 这个线程池,是用来派发Spark中Endpoint的消息的,比如OnStart,RpcMessage等。 这个线程池创建的时原创 2020-09-25 17:41:31 · 632 阅读 · 0 评论 -
Spark源码精读一一心跳机制
这里写目录标题SparkContextSparkSession SparkContext SparkSession原创 2020-09-24 15:55:23 · 476 阅读 · 0 评论