- 博客(2)
- 收藏
- 关注
RSS订阅原创 Spark综合大作业：RDD编程初级实践
Spark综合大作业：RDD编程初级实践实验配置：操作系统：Ubuntu16.04 | 环境：Spark版本：2.4.0 | 软件：Python版本：3.4.3。文章目录一、实验目的二、实验平台三、实验内容和要求1、pyspark交互式编程2、编写独立应用程序实现数据去重3、编写独立应用程序实现求平均值问题四、经验总结五、参考文献一、实验目的（1）熟悉Spark的RDD基本操作及键值对操作；（2）熟悉使用RDD编程解决实际具体问题的方法。二、实验平台本次大作业的实验是操作系统：Ubuntu1
2021-06-09 23:33:07
11594
6
原创 Hadoop综合大作业：调用MapReduce对文件中各个单词出现次数进行统计
Hadoop综合大作业：调用MapReduce对文件中各个单词出现次数进行统计实验配置：系统:Ubuntu Kylin | 环境：Hadoop | 软件：Eclipse文章目录一、作业要求二、安装VirtualBox虚拟机软件，在VirtualBox中安装Ubuntu三、准备工作1.创建Hadoop用户2.设置hadoop的密码3.为hadoop用户增加管理员权限，方便部署4.更新 apt5.安装vim6.安装SSH、配置SSH无密码登陆四、安装Java环境1.安装JDK2.验证JDK安装情况3.设置
2020-12-19 21:18:57
1450
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人