![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
spark
小米的蝉
Keep It Simple and Stupid
展开
-
Spark 2.4.0 cdh6.3.2连接 Hive 2.1.1 cdh6.3.2
以下maven配置能正确读取hive.不该加的不要加. spark版本用cdh的.<properties> <maven.compiler.source>8</maven.compiler.source> <maven.compiler.target>8</maven.compiler.target> <spark.version>2.4.0-cdh6.3.2</spark.ve原创 2021-01-06 12:32:07 · 1097 阅读 · 1 评论 -
Spark2 Sql 遇到 Caused by: java.lang.NoSuchFieldError: HIVE_STATS_JDBC_TIMEOUT
问题版本:Spark:2.14.0Hive:2.1.0原因参见spark hive java.lang.NoSuchFieldError: HIVE_STATS_JDBC_TIMEOUT解决方案:使用 cdh版本的包,比如<spark.version>2.4.0-cdh6.3.2</spark.version><hive.version>2.1.1-cdh6.3.2</hive.version>如果遇到有关 apache的log4j包缺失,加原创 2020-12-11 16:53:28 · 1782 阅读 · 0 评论