- 博客(2)
- 收藏
- 关注
RSS订阅原创 RDD编程初级实践
RDD编程初级实践**1、需求描述**本次实验需要的数据集来自老师提供的txt文档，其中包含了某大学计算机系的成绩、A与B文件与重复内容、班级学生某个学科的成绩等相关数据。1．pyspark交互式编程请到教材官网的“下载专区”的“数据集”中下载chapter4-dat.txt，该数据集包含了某大学计算机系的成绩，数据格式如下所示：Tom,DataBase,80Tom,Algorithm,50Tom,DataStructure,60Jim,DataBase,90Jim,Algorithm
2021-06-10 13:32:34
657
2
原创 调用MapReduce对文件中各个单词出现次数进行统计
实验配置：系统:Ubuntu Kylin | 环境：Hadoop | 软件：Eclipse文章目录调用MapReduce对文件中各个单词出现次数进行统计要求一、安装Ubuntu二、准备工作1.创建Hadoop账户2.设置hadoop密码 :3.为hadoop用户增加管理员权限:4.更新 apt5.安装vim6.配置SSH三.安装Java环境1.安装JDK2.验证JDK安装情况3.设置JAVA坏境变量四.安装Hadoop五.Hadoop伪分布式配置1.修改配置文件2.格式
2020-12-17 15:24:47
567
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人