在学习Spark时遇到的初始错误——`SparkException: A master URL must be set in your configuration`。此问题是因为在配置中未设定Master。解决方法是在`SparkConf`中添加`setMaster("local")`，例如：`SparkConf conf = new SparkConf().setAppName("WordCount").setMaster("local");`。Master的设置选项包括：local、local[N]、local[*]、spark://host:port、mesos://host:port、yarn-client和yarn-cluster。
在之前学习spark时遇到的一个问题，这个问题比较简单，是刚开始学习时遇到的，属于最简单的问题。
org.apache.spark.SparkException: A master URL must be set in your configuration
at org.apache.spark.SparkContext.<init>(SparkContext.scala:401)
at org.apache.spark.api.java.JavaSparkContext.<init>(JavaSparkContext.scala:59)
at dsl.spark.test.WordCount.main(WordCount.java:22)
这个问题主要是因为没有为程序设置Master,程序如下：
SparkConf conf = new SparkConf().setAppName("WordCount");
JavaSparkContext sc = new JavaSparkContext(conf);
最低0.47元/天 解锁文章
1215
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
