Spark 存储管理之BlockManger
[睡着的水-hzjs-2016.08.24]
一、BlockManager 运行
1、在Application 启动的时候会在SparkEnv 中注册 BlockManagerMaster以及MapOUtputTracher,其中:
# a、 BlockManagerMaster:对整个集群的Block数据进行管理的;
Spark 存储管理之BlockManger
[睡着的水-hzjs-2016.08.24]
一、BlockManager 运行
1、在Application 启动的时候会在SparkEnv 中注册 BlockManagerMaster以及MapOUtputTracher,其中:
# a、 BlockManagerMaster:对整个集群的Block数据进行管理的;