maven scala idea 步骤

 首先在idea中new->project, 然后如图:


之后步骤如下:


之后点击finish。

在src/main/scala/wr路径下新建一个scala文件WordCount.scala,代码如下:

package wr

import org.apache.spark.{SparkConf, SparkContext}

object WordCount {
  def main(args: Array[String]) {
//    if (args.length < 1) {
//      System.err.println("Usage: <file>")
//      System.exit(1)
//    }

    val conf = new SparkConf().setAppName("wordCount").setMaster("local")
    val sc = new SparkContext(conf)
    val line = sc.textFile("/user/root/test")

    line.flatMap(_.split(" ")).map((_, 1)).reduceByKey(_+_).collect().foreach(println)

    sc.stop()
  }
}
在原始pom.xml的基础上更改scala.version的值,改成idea中scala SDK版本。之后删除有关Junit的配置行,同时删除src文件并排的test文件夹,(因为test用处不大,但是有可能因为版本问题出错,因此在此处我选择删除)同时增加下面两个配置。(这里适用于WordCount)如果是复杂的,则需要在增加更多配置,在这里省略

<plugin>
          <groupId>org.apache.maven.plugins</groupId>
          <artifactId>maven-jar-plugin</artifactId>
          <configuration>
            <archive>
              <manifest>
                <mainClass>wr.WordCount</mainClass>
              </manifest>
            </archive>
          </configuration>
        </plugin>
 <dependency>
      <groupId>org.apache.spark</groupId>
      <artifactId>spark-core_2.11</artifactId>
      <version>2.2.0</version>
    </dependency>
之后在project Structure中的Artifacts中进行添加

之后点击apply之后点击OK。打包完成。

在菜单栏的build中点击下图按钮。之后点击build。最后在maven projects中的Lifecycle中选择package,进行打包即可。



  • 2
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值