- 博客(2)
- 收藏
- 关注
原创 RDD编程初级实践
RDD编程初级实践 一、实验目的 (1)熟悉Spark的RDD基本操作及键值对操作; (2)熟悉使用RDD编程解决实际具体问题的方法。 二、实验平台 操作系统:Ubuntu16.04 Spark版本:2.4.0 Python版本:3.4.3 三、实验内容和要求 1.pyspark交互式编程 本作业提供分析数据data.txt,该数据集包含了某大学计算机系的成绩,数据格式如下所示: Tom,DataBase,80 Tom,Algorithm,50 Tom,DataStructure,60 Jim,DataBa
2021-06-07 08:47:27 77
原创 调用MapReduce对文件中各个单词出现的次数进行统计
调用MapReduce对文件中各个单词出现的次数进行统计 Hadoop安装 环境 创建hadoop用户 更新apt 安装SSH、配置SSH无密码登陆 安装Java环境 安装 Hadoop 2 运行Hadoop伪分布式实例 使用Eclipse编译运行MapReduce程序 环境 安装 Eclipse 安装 Hadoop-Eclipse-Plugin 配置 Hadoop-Eclipse-Plu
2020-12-18 00:21:15 535
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人