- 博客(2)
- 收藏
- 关注
RSS订阅转载 大话Spark(7)-源码之Master主备切换
Master作为Spark Standalone模式中的核心，如果Master出现异常，则整个集群的运行情况和资源都无法进行管理，整个集群将处于无法工作的状态。 Spark在设计的时候考虑到了这种情况，Master可以起一个或者多个Standby Master，当Master出现异常的时候，S...
2019-06-18 19:14:00
66
转载 大话Spark(6)-源码之SparkContext原理剖析
SparkContext是整个spark程序通往集群的唯一通道，他是程序的起点，也是程序的终点。 我们的每一个spark个程序都需要先创建SparkContext，接着调用SparkContext的方法， 比如说 sc.textFile(filepath)，程序最后也会调用sc.stop（）来...
2019-06-11 23:04:00
92
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人