![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
spark-sql
H.King
专注大数据相关技术
展开
-
spark sqlcontext 读取json 文件
多行json 直接 使用 sqlcontext.read().json("path") 读取时候 报错如下 :Exception in thread "main" org.apache.spark.sql.AnalysisException: Since Spark 2.3, the queries from raw JSON/CSV files are disallowed when ...原创 2019-09-01 15:29:54 · 2593 阅读 · 0 评论 -
spark sql 使用过程中 无法识别输入字段
在使用spark sql 过程中 可能映射为实体类但是该实体类的属性 ,并没有设置getter setter 方法 就会出现如下问题提示 : 无法识别某些字段/Library/Java/JavaVirtualMachines/jdk1.8.0_181.jdk/Contents/Home/bin/java "-javaagent:/Applications/Intelli...原创 2019-09-05 10:12:52 · 1055 阅读 · 0 评论