Spark
文章平均质量分 93
果子哥丶
发奋要往上
展开
-
Spark基础知识
Spark基础知识第1章 Spark概况1.1 Spark基础Spark相对于Hadoop的优势Hadoop和Spark的统一部署1.2 Spark核心模块第2章 Spark快速上手2.1 Spark三种部署方式local模式Standalone模式Yarn模式Spark Streaming配置高可用(HA)第3章 Spark运行架构Spark基本概念3.1 运行架构3.2 核心组件3.2.1 Driver3.2.2 Executor3.2.3 Master&Worker3.2.4 Applicat原创 2021-09-01 11:42:54 · 1529 阅读 · 0 评论 -
Spark基础教程
Spark最初由美国加州伯克利大学的AMP实验室于2009年开发,是基于内存计算的大数据并行计算框架,可用于构建大型的、低延迟的数据分析应用程序。Spark特点 Spark具有如下几个主要特点: 运行速度快:Spark使用先进的DAG(Directed Acyclic Graph,有向无环图)执行引擎,以支持循环数据流与内存计算,基于内存的执行速度可比Hadoop MapReduce快上百倍,基于磁盘的执行速度也能快十倍;容易使用:Spark支持使用Scala、Java、Python和R语言进行编程,原创 2021-01-25 15:42:23 · 4503 阅读 · 3 评论