spark
Happy王子乐
联系QQ:820155406
展开
-
Spark在Windows下的环境搭建
由于Spark是用Scala来写的,所以Spark对Scala肯定是原生态支持的,因此这里以Scala为主来介绍Spark环境的搭建,主要包括四个步骤,分别是:JDK的安装,Scala的安装,Spark的安装,Hadoop的下载和配置。为了突出”From Scratch”的特点(都是标题没选好的缘故),所以下面的步骤稍显有些啰嗦,老司机大可不必阅读,直接跳过就好。 一.JDK的安装转载 2018-04-19 16:47:13 · 251 阅读 · 0 评论 -
Spark 简单实例(基本操作)
目录[-]1、准备文件 2、加载文件 3、显示一行 4、函数运用 (1)map (2)collecct (3)filter (4)flatMap (5)union (6) join (7)lookup (8)groupByKey (9)sortByKey1、准备文件?1wget http://st转载 2018-04-19 16:49:53 · 1038 阅读 · 0 评论