探花交友之Spark

8 篇文章 5 订阅 ¥19.90 ¥99.00
Apache Spark是一个专注于大规模数据处理的快速通用计算引擎,提供高容错性和内存计算能力。本文介绍了Spark的基本概念,如RDD、算子操作,以及Spark的高可用部署方案,包括基于Zookeeper的Standby Masters。此外,还探讨了Spark的架构、任务调度和执行流程。
摘要由CSDN通过智能技术生成

官网:http://spark.apache.org/

了解Spark

Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎

Spark是通用大数据处理框架。

A(Algorithms) 算法

M(Machines) 机器

P(People)人

Spark希望在三者之间进行大规模的集成,并且进行展现运用,将大数据转化为有用的信息。

Spark 生态系统已经发展成为一个包含多个子项目的集合,其中包含SparkSQL、Spark Streaming、GraphX、MLlib 等子项目,逐步形成了大数据处理的一站式解决平台。

Spark 是基于内存计算的大数据并行计算框架。Spark 基于内存计算,提高了在大数据环境下数据 处理的实时性,同时保证了高容错性和高可伸缩性,允许用户将 Spark 部署在大量廉价硬件之上 形成集群。

Spark 是一个开源的类

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

越来越没意思

你的鼓励将是我最大的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值