java.net.URISyntaxException: Relative path in absolute URI: file:**/spark-warehouse

最新推荐文章于 2023-06-20 14:35:38 发布

陈沐

最新推荐文章于 2023-06-20 14:35:38 发布

阅读量605

点赞数

分类专栏： spark 文章标签： spark java scala

本文链接：https://blog.csdn.net/qq_44735442/article/details/120619076

版权

spark 专栏收录该内容

8 篇文章 0 订阅

订阅专栏

最近学习Spark，尝试连接数据库的时候一个例子一直报一个错，说是Spark-warehouse路径有问题（都不知道Spark-warehouse这玩意儿是啥）
一开始main下的代码是这样的

val sparkConf: SparkConf = new SparkConf().setMaster("local[*]").setAppName("readFrom_toMySQL")
    val sc: SparkContext = new SparkContext(sparkConf)

报错java.net.URISyntaxException: Relative path in absolute URI: file:**/spark-warehouse
好像是spark.sql.warehouse.dir这个问题，就试着加上这个配置指到spark2.0.0的路径,可以运行成功,或者添加file:///

  val sparkConf: SparkConf = new SparkConf().setMaster("local[*]").setAppName("readFrom_toMySQL")
    sparkConf.set("spark.sql.warehouse.dir","file:///")
    val sc: SparkContext = new SparkContext(sparkConf)