在之前学习spark时遇到的一个问题,这个问题比较简单,是刚开始学习时遇到的,属于最简单的问题。
org.apache.spark.SparkException: A master URL must be set in your configuration
at org.apache.spark.SparkContext.<init>(SparkContext.scala:401)
at org.apache.spark.api.java.JavaSparkContext.<init>(JavaSparkContext.scala:59)
at dsl.spark.test.WordCount.main(WordCount.java:22)
这个问题主要是因为没有为程序设置Master,程序如下:
SparkConf conf = new SparkConf().setAppName("WordCount");
JavaSparkContext sc = new JavaSparkContext(conf);