spark
文章平均质量分 77
帅天下
这个作者很懒,什么都没留下…
展开
-
Spark在Win10下的环境搭建
前言本章将介绍如何在WIN10下实现spark环境搭建。本章概要1、版本说明2、环境准备:jdk配置;scala安装与配置;spark安装与配置;hadoop安装与配置;版本说明jdk:1.8scala:2.11.8spark:2.3.0hadoop:2.8.3环境准备jdk配置1、配置JAVA_HOME与Path:Path2、验证配置:scala安装与配置1、scala下载:访问官方地址http...原创 2018-03-08 10:15:06 · 39110 阅读 · 31 评论 -
基于IDEA构建Spark应用并部署
前言本章将介绍如何通过IDEA构建Spark应用,并最终部署。构建应用Java应用1、新建一个maven项目,并在POM中添加如下依赖:<properties> <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding> <java.version>1.8<...原创 2018-03-15 23:03:47 · 1033 阅读 · 0 评论