IntelliJ IDEA打jar包--scala class--提交到java或者spark运行

标签: IntelliJ scala jar spark
10人阅读 评论(0) 收藏 举报
分类:

编译文件并且打成jar包,运行jar包

第一步:file–>artifacts填写相关内容后返回

这里写图片描述

第二步:build–>build artifacts–>build
在刚刚我们选择的保存目录下找到.jar文件

这里写图片描述

第三步:提交运行

  1. 在java下运行
    这里写图片描述

  2. 在spark-shell中提交运行
    这里写图片描述

  3. 不加spark-shell的路径提交也OK

这里写图片描述

查看评论

Spark学习: Spark-Scala-IntelliJ开发环境搭建和编译Jar包流程

spark-scala使用IntelliJ搭建的开发环境。
  • databatman
  • databatman
  • 2016-08-29 22:55:17
  • 6538

Intellij IDEA开发环境搭建,scala配置及打包,jar包在spark中的运行

1. Intellij IDEA 开发环境搭建 最近在学习scala,除需要编写scala程序外,同时还需要创建maven工程,打成Jar包,而Eclipse在这方面显得使用的不是那么方面,同时由于...
  • love666666shen
  • love666666shen
  • 2017-11-06 22:11:46
  • 2611

使用IntelliJ IDEA创建jar包及在集群上的提交方式

在本地完成一个Maven项目的编写后,需要将其打成jar包,以方便在集群上运行,本文将介绍使用IntelliJ IDEA生成jar包并在集群上运行的过程。...
  • h8178
  • h8178
  • 2017-10-24 11:29:58
  • 255

IntelliJ IDEA开发Spark、打JAR包

清明假期折腾了两天,总结了两种方式使用IDE进行spark程序,记录一下: 第一种方法比较简单,两种方式都是采用SBT进行编译的。 注意:本地不需要安装Scala程序,否则在编译程序时有版...
  • fz2543122681
  • fz2543122681
  • 2016-08-24 23:29:23
  • 11463

IDEA 打jar,提交spark集群运行

1、idea打开file,选择projectstructure,点击Artifacts,如下图 选择add JAREmpty 然后点击OK   2、选择bulid Artifacts...
  • qq_33373110
  • qq_33373110
  • 2017-05-15 14:18:11
  • 470

intellij idea 打可运行scala jar 包的两种方式

今天折腾了一天 研究 idea 打可运行scala 代码的 jar 包。有些心得记录下来,供大家参考,希望能帮助到一些同事。 此前在网络上有一些关于打jar 包的资料,大都是一些转载,或者介绍的不是很...
  • freecrystal_alex
  • freecrystal_alex
  • 2017-10-20 16:27:32
  • 1312

idea+maven+scala创建wordcount,打包jar并在spark on yarn上运行

maven+scala+idea创建第一个wordcount项目,打包成jar并用命令行在spark on yarn集群上运行。...
  • u011470552
  • u011470552
  • 2017-01-15 21:08:36
  • 4540

IDEAJ中Scala打包提交Spark集群运行

最简单一个demo //读取hdfs,然后写入hdfspackage com.spark.FirstApp import org.apache.spark.SparkContext import o...
  • LC900730
  • LC900730
  • 2017-12-11 22:27:33
  • 162

IDEA Spark-submit提交任务到集群

1 IDEA 打包 示例代码参考AMPCamp2015之SparkSQL,开发环境使用idea。首先需要将程序打包成jar 选择project structure ...
  • u010159842
  • u010159842
  • 2017-03-27 17:50:12
  • 1148

IDEA 运行调试Scala程序,做成jar包放到集群运行

为了让Scala运行起来还是很麻烦,为了大家方便,还是记录下来: 1、首先我下载的是IDEA的社区版本,版本号为15. 2、下载安装scala插件: 2.1 进入设置菜单。    2.2 点...
  • charKim
  • charKim
  • 2017-10-27 14:41:01
  • 391
    个人资料
    持之以恒
    等级:
    访问量: 3万+
    积分: 684
    排名: 7万+
    最新评论