Scala
零落尘土
爱看书,爱交友,有时候不讲道理,嘿嘿
展开
-
Scala+Spark连接MySQL数据库使用例子
环境:MySQL5.7在写例子的时候,在pom.xml配置MySQL的驱动一直报 No suitable Driver后面查了很多,说需要8.0以上的connector配置后的例子如下:在pom.xml中增加如下代码 <properties> <mysql-connector-java.version>8.0.11</mysql-conn...原创 2019-10-12 11:36:49 · 1301 阅读 · 0 评论 -
配置Scala 的 IDEA开发环境与简单例子
1、 前置条件Scala 的运行依赖于 JDK,Scala 2.13.x 需要 JDK 1.8+。2、 安装Scala插件IDEA 默认不支持 Scala 语言的开发,需要通过插件进行扩展。打开 IDEA,依次点击File=>settings=>plugins选项卡,搜索 Scala 插件 (如下图)。找到插件后进行安装,并重启 IDEA 使得安装生效。3...原创 2019-10-08 11:12:54 · 296 阅读 · 0 评论 -
Idea+Maven创建scala+spark的wordCount例子
1.选择Create New Project2、填写GroupId,ArtifactId3、选择文件夹,自己填写Project Name4、pom文件如下<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"...原创 2019-10-08 16:32:30 · 289 阅读 · 0 评论 -
IDEA+MAVEN搭建Scala错误Error:scalac: error while loading JUnit4, Scala signature JUnit4 has wrong versio
有开头是类似错误的:Error:scalac: error while loading JUnit4, Scala signature JUnit4 has wrong version expected: 5.0出现这个报错主要是版本问题(1)将自动生成的main的App文件改一个名字,同事extends改成App即可package com.scala.test/** * ...原创 2019-10-09 10:21:31 · 1609 阅读 · 0 评论 -
IDEA配置Scala项目显示Spark找不到spark
报错如下:【导入spark包】 在项目右键“Open Mudules Setting” -> “Libraries”, 点“+”,选“java”,找到spark的jar导入,这样就可以编写spark的scala程序了导入之后就不报这个错了。...原创 2019-10-09 14:20:26 · 1133 阅读 · 0 评论 -
Scala的安装与使用2.12.10
上次安装的最新的2.13的各种问题,现在改成2.12的,写一下mark一下首先到官网下载scala ,网址为Scala下载,进入看到的是最新的2.13我下载的是2.12.10 ,然后双击运行,直至安装成功修改环境变量配置:项目右键 ,修改scala的版本...原创 2019-10-10 10:46:34 · 2824 阅读 · 2 评论 -
Scala+Spark实现取出每个班级的top3
package com.scala.testimport org.apache.spark.SparkConfimport org.apache.spark.SparkContextimport org.apache.spark.rdd.RDD/** * @author 零落尘土 * @since 2019-10-10 */object ScoreCount { def m...原创 2019-10-10 15:41:13 · 1368 阅读 · 0 评论 -
IDEA报错:Error running $classname: Command line is too long. Shorten command line for $classname.
报错信息如下:之所以出现这个原因是一般是因为打印的环境变量太长了,超过了限制,可以尝试以下方案:方法一:选中上图中的蓝色字,跳转到下图。选择j如图jar manifest(每个报错的类都需要注意设置)方法二:项目的.idea/workspace.xml有这个选项,可以修改默认值,这样就不用每次更改...原创 2019-10-11 16:28:37 · 179 阅读 · 0 评论