首先列下sparkContext 做了哪些事,以及市怎么做的
1:sparkContext 在driver 端创建
2:构造参数:sparkconf 配置文件(配置参数没提到的的变量,将用默认参数使用)
2,1 参数中几个重要的参数:是否允许多个sparkContext
config.getBoolean("spark.driver.allowMultipleContexts", false)
参数标记:stop变量,如果sparkContext 创建成功,stop =false 意思是处于active状态,就不可以再创建
3:一些版本警告:如java版本,scala版本
Support for Java 7 is deprecated as of Spark 2.0.0"