大数据技术原理及应用课实验7 :Spark初级编程实践
实验介绍
本实验为《大数据技术原理及应用》课程中的第七次实验,主题为Spark初级编程实践。通过本实验,学生可以掌握使用Spark访问本地文件和HDFS文件的方法,以及Spark应用程序的编写、编译和运行方法。
实验目的
- 掌握使用Spark访问本地文件和HDFS文件的方法。
- 掌握Spark应用程序的编写、编译和运行方法。
实验平台
- 操作系统:Ubuntu 18.04(或Ubuntu 16.04)
- Spark版本:2.4.0
- Hadoop版本:3.1.3
实验步骤
实验包含详细的步骤说明和运行截图,以下为实验前期准备:
实验前期准备
(此处应包含实验前期准备的详细步骤和运行截图)
注意:以上内容仅为实验概述和前期准备,具体实验步骤及运行截图将在实验报告中详细展示。