使用idea开发Scala的Wordcount程序并提交到spark集群中

开发准备，idea，配置了Scala的win10电脑，因为集群中的spark是1.6版本，所以需要Scala的版本为Scala2.10.5

接下来，将spark的包在win10解压，将lib目录下的

复制一份到一个不含中文的目录中，jar包会有两个，我们需要的是大的那个。

打开idea新建工程，按图选择

选择Scala版本，选择2.10.5的，因为之前安装过2.11的，需要选择到2.10

目录结构

添加一个Scala类，

package cn.spark.study.core

import org.apache.spark.