Spark技术内幕:Client,Master和Worker 通信源码解析
Spark的Cluster Manager可以有几种部署模式:
StandloneMesosYARNEC2Local
在向集群提交计算任务后,系统的运算模型就是Driver Program定义的SparkContext向APP Master提交,有APP Master进行计算资源的调度并最终完成计算。具体阐述可以阅读《Spark:大数据的电花火石!
》。
那么Standal
转载
2014-08-04 22:38:33 ·
10640 阅读 ·
0 评论