spark
Ethan_Zh
喜欢一边吸收新的知识,一边打造满意的身材
这就是我,不一样的烟火
展开
-
hive on spark下运行sparkSql
hive on spark的spark版本是没有把hive编译进去的,所以在sparkSql运行时候找不到hive的包。目前没找到解决办法,但是CDH版本的spark能解决这个问题。原创 2018-08-24 13:37:13 · 484 阅读 · 5 评论 -
spark报错:scala.reflect.api.JavaUniverse.runtimeMirror
idea上的scala版本和集群中的版本不一致,修改成同样的版本即可。转载 2018-08-23 17:57:02 · 799 阅读 · 0 评论 -
idea链接不上spark主机模式
报错:Exception thrown in awaitResult:原因:版本问题解决办法:更改<dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.10</artifactId> <version&...原创 2018-08-23 17:54:08 · 731 阅读 · 0 评论