基于IntelliJ IDEA开发Spark的Maven项目——Scala语言

最新推荐文章于 2024-07-29 18:14:55 发布
最新推荐文章于 2024-07-29 18:14:55 发布
阅读量3w 收藏 26
点赞数 7
分类专栏： Spark 文章标签： spark maven intellij idea
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kwu_ganymede/article/details/51832427
版权
本文介绍了如何使用IntelliJ IDEA 2016创建基于Maven的Scala Spark项目。首先，下载并安装IntelliJ IDEA，接着安装Scala插件。然后，创建Maven项目，配置GroupId和ArtifactId。在pom.xml中添加Scala和Spark的依赖，并将Java目录替换为Scala源文件夹。最后，展示了如何开发Spark实例并进行打包编译。
摘要由CSDN通过智能技术生成

基于IntelliJ IDEA开发Spark的Maven项目——Scala语言


1、Maven管理项目在JavaEE普遍使用，开发Spark项目也不例外，而Scala语言开发Spark项目的首选。因此需要构建Maven-Scala项目来开发Spark项目，本文采用的工具是IntelliJ IDEA 2016，IDEA工具越来越被大家认可，开发java, python ,scala 支持都非常好

下载链接 ： https://www.jetbrains.com/idea/download/

安装直接下一步即可


2、安装scala插件，File->Settings->Editor->Plugins,搜索scala即可安装



可能由于网络的原因下载不了，可以采取离线安装的方式，例如：


提示下载失败后，根据提示的地址下载离线安装包 http://plugins.jetbrains.com/files/631/24825/python-145.86.zip

在界面选择离线安装即可：



3、创建Maven工程，File->New Project->Maven

选择相应的JDK版本，直接下一步


设定Maven项目的GroupId及ArifactId


最低0.47元/天 解锁文章
kwu_ganymede
关注
  • 7
    点赞
  • 踩
  • 26
    收藏
    觉得还不错? 一键收藏
  • 4
    评论
专栏目录
Intellij IDEA使用Maven构建spark开发环境
徐先森的博客
05-12 4660
如何一步一步地在Intellij IDEA使用Maven搭建spark开发环境，并基于scala编写简单的spark中wordcount实例。
利用IntelliJ IDEA与Maven开始你的Scala之旅
热门推荐
大气人生
10-23 2万+
一. IntelliJ IDEA安装及配置1.1 IntelliJ IDEA下载及安装　　首先在 CHOOSE YOUR EDITION 这里选择Community版本，这个版本是免费提供的，对我们的Spark使用来说，用这个版本已经足够了。如下图所示：　　直接点击黑色的 DOWNLOAD 按钮会默认开始下载Windows版本的IntelliJ IDEA，如果需要其他平台的版本，可以点击旁边的 .E
Intellij IDEA使用Maven搭建spark开发环境（scala）
weixin_30751947的博客
11-24 572
如何一步一步地在Intellij IDEA使用Maven搭建spark开发环境，并基于scala编写简单的spark中wordcount实例。 1.准备工作 首先需要在你电脑上安装jdk和scala以及开发工具Intellij IDEA，本文中使用的是win7系统，环境配置如下： jdk1.7.0_15 scala2.10.4 scala官网下载地址：http://www.sca...
Spark应用程序编写（Scala+Maven）
最新发布
m0_63025635的博客
07-29 691
右击test---点击Maven---点击Generate Source and Update Folders。点击Install JetBrains plugin...---搜索scala---点击安装。右击scala---新建Scala Class---选择Object---命名test01。打开Intellij文件夹，并且使用其bin文件夹下的idea.sh打开程序。右击test---新建Directory---命名scala。点击Project---点击new---选择JDK。
【idea实用系列4】使用Maven构建Scala项目
wang2leee的博客
12-16 2074
Maven是一个构建/项目管理工具。它倾向于“约定优于配置”，可以极大地简化构建过程。通过查看项目的pom.xml文件，Maven用户通常可以了解项目的结构和配置信息。Maven采用插件化架构，方便在项目中添加新的库和模块。您可以从中央仓库等资源库下载这些“artifacts”。
IntelliJ IDEA创建Maven scala项目
mn_kw的博客
04-24 398
本文主要介绍在IntelliJ IDEA创建Maven项目–Scala的基础步骤。第一步：打开IntelliJ IDEA 第二步：Create New Project–>Maven–>Next  第三步：GroupId->ArtifactId–>Next  第四步：Finish  第五步:在main下右键创建文件夹–>scala  第六步：发现scala文件夹图标为灰...
IntelliJ IDEA下Maven创建Scala项目的方法步骤
08-25
IntelliJ IDEA 下 Maven 创建 Scala 项目的方法步骤 IntelliJ IDEA 是一个功能强大的集成开发环境（IDE），它提供了多种项目模板和插件来帮助开发者快速创建和开发项目。Scala 是一种基于 Java 的编程语言，它提供...
Intellij IDEA编写Spark应用程序超详细步骤（IDEA+Maven+Scala）
Wingkin的博客
12-16 1万+
本文介绍Intellij IDEA编写Spark应用程序，项目使用maven构建。
IntelliJ IDEA创建Maven项目--Scala
kicilove的小屋
04-17 9855
本文主要介绍在IntelliJ IDEA创建Maven项目–Scala的基础步骤。 第一步：打开IntelliJ IDEA 第二步：Create New Project–>Maven–>Next 第三步：GroupId->ArtifactId–>Next 第四步：Finish 第五步:在main下右键创建文件夹–>scala 第六步：发...
上手提示：使用新版IDEA+Maven+Scala编写Spark程序
09-24
2017版IDEA相对以前版本在细节上有比较大的变化，经过一些尝试，我将使用过程中遇到的一些要点简要记录下来
IntelliJ IDEA构建基于maven的spark+hbase工程（scala语言）
豪大大的博客
11-08 5007
利用IDEA来编写基于maven的scala程序，主要功能用来支持从hbase中拉取数据供spark进行mapreduce运算。
IDEA 创建Maven Scala项目
cai5的专栏
03-29 5722
1、开发环境 IDEA版本： Scala版本：2.13.3 操作系统为：Windows 10 2、IDEA 安装Scala插件 3、创建Maven scala类型项目 File à New à Project... 选择Maven，在archetype中选择：org.scala-tools.archetypes:scala-archetype-simple,如下： 填写name和修改GroupId， 选择系统中安装的maven目录，即配置的maven 点.
idea构建scala的maven项目
02-09 1701
1.下载scala的插件 快捷键：Ctrl+Alt+s 安装完成后，提醒需要重新IDEA 2.创建maven工程 3.安装scala的sdk 4.创建scala的package
《摸摸头之scala》1. idea 创建一个maven-scala项目
Smileyan's blog
06-26 1万+
scala 快速入门
maven scala idea 步骤
clever_wr的博客
08-22 286
首先在idea中new->project， 然后如图： 之后步骤如下： 之后点击finish。 在src/main/scala/wr路径下新建一个scala文件WordCount.scala，代码如下： package wr import org.apache.spark.{SparkConf, SparkContext} object WordCount { de
Intellij IDEA15：建立Scala的Maven项目
北京小辉
04-17 8201
在创建Scala的Maven之前要安装JavaJDK  、 Scala 的JDK  、 Maven配置，请参考下面 Intellij IDEA15安装和配置 http://blog.csdn.net/silentwolfyh/article/details/51089878 Intellij IDEA15的常用快捷键 http://blog.csdn.net/sile
IDEA创建maven下的scala项目
chuhulin4007的博客
08-23 435
配置mvn下的scala项目 -首先下载maven并配置maven的环境变量： 1)M2_HOME和MAVEN_HOME E:\Java\apache-maven-3.5.4 2)添加path变量 E:\Java\apache-maven-3.5.4 - 下载scala并配置环境变量，和maven一样并在File——settings——Plugins中下载scala - 修改仓库地址...
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值