![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Spark
文章平均质量分 63
Spark
云烟成雨TD
一个追求有道有术的非典型程序员
展开
-
Spark入门系列(2)-Spark开发WorldCount入门案例
环境准备安装并配置Scala开发环境文档创建一个普通maven父项目,并创建子模块。添加scala库编写一个测试程序,检验环境添加pom <dependencies> <dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.12</arti原创 2021-01-27 10:21:36 · 401 阅读 · 0 评论 -
Spark入门系列(1)-Spark简介
概述官网Spark 是加州大学伯克利分校 AMP(Algorithms,Machines,People)实验室开发的通用内存并行计算框架。Spark 在 2013 年 6 月进入 Apache 成为孵化项目,8 个月后成为 Apache 顶级项目。Spark 以其先进的设计理念,迅速成为社区的热门项目,围绕着 Spark 推出了 SparkSQL、SparkStreaming、MLlib 和 GraphX 等组件,逐渐形成大数据处理一站式解决平台。Spark and Hadoop发展历史Had原创 2021-01-26 15:15:39 · 271 阅读 · 0 评论 -
Scala入门系列(1)-Scala开发环境搭建
简介官方网站Scala 是一门多范式(multi-paradigm)的编程语言,设计初衷是要集成面向对象编程和函数式编程的各种特性。Scala 运行在 Java 虚拟机上,并兼容现有的 Java 程序。Scala 源代码被编译成 Java 字节码,所以它可以运行于 JVM 之上,并可以调用现有的 Java 类库。...原创 2021-01-26 16:01:15 · 439 阅读 · 0 评论