- 博客(2)
- 收藏
- 关注
原创 RDD编程初级实践
一、实验目的(1)熟悉Spark的RDD基本操作及键值对操作;(2)熟悉使用RDD编程解决实际具体问题的方法。二、实验平台操作系统:Ubuntu16.04Spark版本:2.1.0Python版本:3.5.2三、实验内容和要求1.pyspark交互式编程下载chapter4-data1.txt,该数据集包含了某大学计算机系的成绩,数据格式如下所示:Tom,DataBase,80Tom,Algorithm,50Tom,DataStructure,60Jim,DataBase,90J
2021-06-09 17:28:12 653
原创 Mapreduce统计
准备工作1.创建hadoop用户1.代码如下$ sudo useradd -m hadoop -s /bin/bash2.设置密码,添加管理员权限。$ sudo passwd hadoop$ sudo adduser hadoop sudo3.更新apt$ sudo apt-get update4.安装配置文件VIM。$ sudo apt-get install vim5.安装SSH、配置SSH无密码登陆。$ sudo apt-get install openssh-serv
2020-12-17 10:49:17 319 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人