- 博客(2)
- 收藏
- 关注
RSS订阅原创 CDH 5.14安装Spark2服务
由于默认的Spark版本为1.6，开发任务需要Spark2所以记录一次Spark2的安装。 一、JDK1.8 集群的JDK版本升级，Spark2需要JDK1.8来支持 下载 JDK1.8 上传到/usr/share/jdk8文件夹下 每个节点都需要在相同的目录下配置JDK CDH配置中制定Java的目录 二、下载spark2 spa...
2019-02-12 18:52:46
919
原创 scala 报错 org/scalacheck/Test$TestCallback 类找不到
背景：需要编写 Scala 单元测试，采用 ScalaTest 框架，代码如下： import org.apache.spark.{SparkConf, SparkContext} import org.scalatest._ class WorldCountTest extends FlatSpec with BeforeAndAfter{ val master = "local[2]"...
2019-02-11 18:10:09
641
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人