⃢-⃢-CSDN博客

原创 2021-06-09

spark编程基础（python版）一、实验目的（1）熟悉Spark的RDD基本操作及添加链接描述键值对操作；（2）熟悉使用RDD编程解决实际具体问题的方法。二、实验平台操作系统：Ubuntu16.04Spark版本：2.1.0Python版本：3.5三、实验内容和要求1．pyspark交互式编程请到教材官网的“下载专区”的“数据集”中下载data01.txt，该数据集包含了某大学计算机系的成绩，数据格式如下所示：Tom,DataBase,80Tom,Algorithm,50Tom

2021-06-09 17:44:18 305 2

原创 Hadoop安装教程方式

本次教程首先介绍的是根据个人经验来安装hadoop环境，其次是林子雨老师Hadoop安装教程方式，大家可以自行选择其中一种方式来进行安装。另外，还附送根据个人经验进行虚拟机磁盘扩容，可以说是痛苦经历吧！个人安装hadoop快捷方式：前期准备：virtualbox 虚拟机下载好的hadoop-2.10.0.tar.gz压缩包1.安装增强功能2.设置共享文件夹，因为有时候双向拷贝功能不能使用3.执行 sudo apt-get update 更新程序4.执行 sudo apt-get inst

2020-12-25 19:44:58 3143

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人