- 博客(2)
- 收藏
- 关注
原创 2021-06-09
spark编程基础(python版)一、实验目的(1)熟悉Spark的RDD基本操作及添加链接描述键值对操作;(2)熟悉使用RDD编程解决实际具体问题的方法。二、实验平台操作系统:Ubuntu16.04Spark版本:2.1.0Python版本:3.5三、实验内容和要求1.pyspark交互式编程请到教材官网的“下载专区”的“数据集”中下载data01.txt,该数据集包含了某大学计算机系的成绩,数据格式如下所示:Tom,DataBase,80Tom,Algorithm,50Tom
2021-06-09 17:44:18
305
2
原创 Hadoop安装教程方式
本次教程首先介绍的是根据个人经验来安装hadoop环境,其次是林子雨老师Hadoop安装教程方式,大家可以自行选择其中一种方式来进行安装。另外,还附送根据个人经验进行虚拟机磁盘扩容,可以说是痛苦经历吧!个人安装hadoop快捷方式:前期准备:virtualbox 虚拟机 下载好的hadoop-2.10.0.tar.gz压缩包1.安装增强功能2.设置共享文件夹,因为有时候双向拷贝功能不能使用3.执行 sudo apt-get update 更新程序4.执行 sudo apt-get inst
2020-12-25 19:44:58
3143
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人