使用idea编辑sparkSql的程序运行出现java.lang.IllegalArgumentException: java.net.URISyntaxException

最新推荐文章于 2024-09-24 06:45:00 发布

EricJeff_

最新推荐文章于 2024-09-24 06:45:00 发布

阅读量4.2k

点赞数

分类专栏： spark 文章标签： idea spark

本文链接：https://blog.csdn.net/w3045872817/article/details/78342772

版权

在使用IntelliJ IDEA（Idea）执行SparkSql程序时遇到了`java.lang.IllegalArgumentException: java.net.URISyntaxException`的错误。通过修改SparkSession配置，特别是设置`spark.sql.warehouse.dir`为有效的文件路径（例如：file:///D://test），可以成功解决问题。

摘要由CSDN通过智能技术生成

这个是具体错误：

Exception in thread "main" java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path in absolute URI: file:D:/idea/work/sparkTest/spark-warehouse
    at org.apache.hadoop.fs.Path.initialize(Path.java:206)
    at org.apache.hadoop.fs.Path.<init>(Path.java:172)
    at org.apache.spark.sql.catalyst.catalog.SessionCatalog.makeQualifiedPath(SessionCatalog