Spark进阶体验

本章节通过spark-shell进入我们的单机spark的终端进行一些简单的运算。 本节内容如下 新建RDD 进行乘法操作 新建RDD 进行过滤操作 编写wordCount小例子 union的使用 groupByKey join reduce lookup 首先安装和启动spark,此部分请参照...

2016-11-19 17:32:16

阅读数:1601

评论数:0

mac安装Scala

Scala语言的名称来自于“可伸展的语言”。它是一种把面向对象和函数式编程理念加入到静态类型语言中的 混血儿。它跑在标准的 Java 平台上,可以与所有的 Java 库实现无缝 交互。它也是用来编写脚 把 Java 控件链在一起的很好的语言。但是用它来建立大系统 和可重用控件的架构将更能够发挥它的...

2016-11-19 16:22:45

阅读数:9067

评论数:0

spark 安装单机版和集群

本文介绍安装mac单机版的spark,和spark 集群安装 分以下步骤 安装scala 下载spark 压缩包并解压 修改spark的配置文件 配置环境变量 验证安装情况 安装Scala mac安装scala教程 下载spark压缩包并解压 到官网下载spark的...

2016-11-18 10:38:59

阅读数:3988

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭