- 博客(5)
- 收藏
- 关注
RSS订阅原创 hive on spark下运行sparkSql
hive on spark的spark版本是没有把hive编译进去的，所以在sparkSql运行时候找不到hive的包。 目前没找到解决办法，但是CDH版本的spark能解决这个问题。
2018-08-24 13:37:13
486
5
原创 hive on tez搭建
Hive on tez 下载编译后的组件 链接：wget http://www-us.apache.org/dist/tez/0.8.5/apache-tez-0.8.5-bin.tar.gz 上传${TEZ_HOME}/share/tez.tar.gz到HDFS目录:${fs.defaultFS}/jar目录 在${HADOOP_HOME}/etc/hadoop目录下创建tez-site....
2018-08-24 13:32:08
875
转载 spark报错：scala.reflect.api.JavaUniverse.runtimeMirror
idea上的scala版本和集群中的版本不一致，修改成同样的版本即可。
2018-08-23 17:57:02
801
原创 idea链接不上spark主机模式
报错:Exception thrown in awaitResult: 原因：版本问题 解决办法：更改 <dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.10</artifactId> <version&...
2018-08-23 17:54:08
743
原创 idea上运行scala报错
报错信息：scala.Predef$.$conforms()Lscala/Predef$$less$colon$less; 报错原因：和spark版本对应不上。 spark1.6.0对应的scala是2.10.x 解决办法:修改windows上的scala版本成2.10.7 scala下载链接:https://www.scala-lang.org/download/2.10.7.html...
2018-08-22 17:05:06
2114
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人