scala
文章平均质量分 69
全力付出
https://zyongjava.github.io
展开
-
scala搭建
Scala搭建简介Scala 是一门多范式(multi-paradigm)的编程语言,设计初衷是要集成面向对象编程和函数式编程的各种特性。Scala 运行在Java虚拟机上,并兼容现有的Java程序。Scala 源代码被编译成Java字节码,所以它可以运行于JVM之上,并可以调用现有的Java类库。环境安装(Mac OS X)下载http://www.scala-lang.org/downl原创 2017-01-19 10:09:33 · 657 阅读 · 0 评论 -
spark(2.1.0)
spark(2.1.0)简介:该文档没有安装hadoop进行关联,简单学习spark文件读取,仅安装spark即可,安装包自带scala环境。环境安装下载地址:http://spark.apache.org/downloads.html下载spark-2.1.0-bin-hadoop2.7.tgz解压spark-2.1.0-bin-hadoop2.7.tgz拷贝生成配置文件,执行cp ./co原创 2017-01-19 10:10:22 · 3185 阅读 · 0 评论 -
Spark基础
Spark基础一、前言使用语言:scala术语:Resilient Distributed Datasets(RDD)二、弹性分布式数据集(RDD)定义Spark围绕着弹性分布式数据集(RDD)的概念,是一个可以并行操作的容错容器集合,有两种方法来创建RDD: 并行化驱动程序中的现有集合 外部存储系统中的数据集,例如共享文件系统,HDFS,HBase或提供Hadoop InputFor翻译 2017-03-15 11:21:03 · 813 阅读 · 0 评论