qq_64684039的博客

1. Hadoop 核心组件包括：A. HDFS 和 HiveB. HDFS 和 MapReduceC. HBase 和 SparkD. YARN 和 ZooKeeper2. HDFS 数据块存储方式的优势不包括：A. 文件大小不受单一磁盘大小限制B. 简化存储过程C. 提高数据访问速度D. 提高数据容错能力3. NameNode 的主要功能是：A. 存储数据块B. 处理数据读写请求C. 管理文件系统命名空间和元数据D. 备份 NameNode 的元数据。

在下面的单元格中编写Scala程序，输出上三角形的九九乘法表，并运行。

Hadoop+Spark大数据技术（微课版）总复习

17周期末考试重点从第五章 scala语言开始比如：映射（匿名函数）

Hadoop+Spark大数据技术 第七次作业

示例: gradedf.selectExpr("name", "name as names" ,"upper(Name)","Scala * 10").show(3)- 示例: gradedf.select("Name", "Class","Scala").show(3,false)修改名称：gradedf.select(gradedf("Name").as("name")).show()orderBy() 和 sort() 方法都可以用于对 DataFrame 进行排序，它们的功能相同。

Hadoop+Spark大数据技术 实验7 Spark综合编程

Hadoop+Spark大数据技术（微课版）曾国荪、曹洁版 第六章 第6次作业 Spark简介与RDD编程

Hadoop+Spark大数据技术（微课版）曾国荪、曹洁版 第六章 Spark RDD编程及相关实验

注意：需要先在hadoop分布式文件系统中创建文件1.先在本地文件系统创建data.txt文件2.启动hadoop分布式文件系统3.上传本地文件data.txt到hadoop分布式文件系统查看分布式文件系统中是否存在data.txt。

1. 面向对象：Scala是一种完全面向对象的语言。其每一种数据类型都是一个对象，这使得它具有非常统一的模型。2. 函数式编程：Scala同时支持函数式编程，它拥有高阶函数、闭包、不可变数据结构、递归等函数式编程的关键特性。3. 扩展性：Scala的语法非常灵活，允许开发者自定义运算符和语法糖。也支持模式匹配、类型推断和匿名函数等高级特性，这些都为编写简洁、高效的代码提供了可能。此外，Scala的语法允许在单个文件中定义类、对象、函数等，使得代码组织更加灵活。

Hadoop+Spark大数据技术（微课版）曾国荪、曹洁版思维导图第五章 Scala基础与编程（未完待续。。。）

Hadoop+Spark大数据技术（微课版）曾国荪、曹洁版思维导图第四次作业 （第4章 HBase分布式DB）

Hadoop+Spark大数据技术（微课版）曾国荪、曹洁版思维导图第四章 HBase分布式数据库

词频统计程序

Hadoop+Spark大数据技术 第三次作业

第三章 MapReduce分布式计算框架 （核心思想：“分而治之”）

Hadoop+Spark大数据技术（微课版）曾国荪、曹洁版思维导图第二章 HDFS大数据分布式存储

Hadoop概述在VirtualBox上安装虚拟机Hadoop安装前的准备工作。