Spark大数据技术第一章测验

Spark大数据技术第一章测验 

 1、Spark的构架设计,它分为4个组成部分,分别为Cluster Manager、Worker、Executor、Driver API。

  True

  False

 2、Spark 哪个模式利用的Hadoop 的资源管理器

  standalone

  spark on mesos

  spark on YARN

  Spark on local  

 3、Spark2.X新特征简单讲述三方面,分别为

  精简的API

  Spark作为编译器

  智能优化

  Spark Core 的优化  

 4、Spark要比Hadoop快 10x-100x。

  True

  False

 5、Spark Core提供Spark最基础与最核心的功能,它的子框架包括Spark SQL,Spark Streaming,MLlib和GraphX。

  True

  False

 6、本章涉及的Spark与Hadoop的区别为

  解决方式不同

  两者可合可分

  应用场景不同

  特点不同

 7、Stage 的 Task 的数量由什么决定

  Partition

  Job

  Stage

  TaskScheduler  

 8、Spark支持多种资源管理器。

  True

  False

 9、Task 运行在下列哪个选项中Executor上的工作单元

  Driver program

  spark master

  worker node

  Cluster manager  

 10、Spark Core包括什么

  Hash

  Mllib

  SparkContext

  Spark SQL

 11、Spark则是一个专门的,用来对那些分布式存储的大数据进行处理的工具,它会进行分布式数据的存储。

  True

  False

 12、Spark特点包括

  迅速

  大量

  稳健

  易用

 13、Spark SQL是Spark用来操作非结构化数据的组件

  True

  False

 14、MapReduce上的不同作业在同一个节点运行时,会各自启动一个JVM(Java虚拟机)。而Spark同一节点的所有任务都可以在一个JVM上运行。

  True

  False  

 15、Spark的四大特点有什么

  迅速

  通用

  通用

  支持多种资源管理器

  简单

 16、Spark 2.0搭载了第二代Tungsten引擎。

  True

  False

 17、Spark在2010年由Matei Zaharia在加州大学伯克利分校的AMPLab

  True

  False

 18、Spark能够帮助我们处理那些需要处理大量实时或压缩数据的计算密集型的任务和挑战。

  True

  False

 19、MLlib是Spark提供的一个机器学习算法库。

  True

  False  

 20、本章所涉及的Spark主要特点有几个

  3

  4

  5

  6

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Spark大数据项目说明文档是一份详细介绍Spark大数据项目的文档,旨在帮助读者了解项目的目标、功能、架构和应用场景等重要信息。 首先,项目说明文档会介绍Spark大数据项目的背景和目标。它会解释为什么选择使用Spark作为大数据处理框架,并说明项目的目标是提高大数据处理效率、降低成本或实现某种特定需求。 其次,文档会详细说明项目的功能和特点。它会列出项目可以处理的数据类型和格式,以及支持的数据处理操作,如数据清洗、转换、过滤和聚合等。文档还会介绍Spark的弹性分布式数据集(RDD)和数据框架,以及它们在项目中的应用。 然后,文档会阐述项目的架构和组成部分。它会说明项目的模块和关键组件,如Spark核心、Spark SQL、Spark Streaming和Spark MLlib等。文档还会展示这些组件之间的依赖关系和交互方式,以及它们在项目中的作用和功能。 此外,项目说明文档还会提供项目的使用指南和示例。它会详细说明如何在具体环境中配置和部署Spark大数据项目,并给出一些常见问题的解答。文档还会附带一些代码示例和示意图,以便读者更好地理解项目的实际应用和工作原理。 最后,文档会讨论项目的应用场景和未来发展方向。它会列举一些常见的使用场景,如日志分析、推荐系统和机器学习等,并探讨未来可能的优化和拓展方向,如与其他大数据技术的集成、支持更多的数据源和扩展更多的功能等。 总之,Spark大数据项目说明文档是一份全面介绍Spark大数据项目的重要文档,它提供了项目的背景、目标、功能、架构和应用场景等关键信息,帮助读者更好地了解和使用该项目。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值