- 博客(2)
- 收藏
- 关注
原创 Saprk大数据实战:RDD基础编程
Saprk大数据实战:RDD基础编程一、安装Hadoop和Spark二 、使用PySpark编程三 、编写Spark独立应用程序剔除重复内容四、编写Spark独立应用程序求出所有学生的平均成绩五、总结六、参考资料一、安装Hadoop和Spark安装Hadoop的过程在我的博客里面,大家可以去搜索一下,也可以看下面的网址,自己进行配置:Hadoop的安装:http://dblab.xmu.edu.cn/blog/285/Spark安装和编程实践(Spark2.4.0):http://dblab.xmu
2021-06-07 19:11:03 601 1
原创 在Ubuntu中调用MapReduce对单词出现的次数进行统计
在Ubuntu中调用MapReduce对各个单词出现的次数进行统计一.Hadoop学习指南1.1创建hadoop用户1.2更新apt1.3安装SSH、配置SSH无密码登陆1.4安装Java环境1.5Hadoop安装1.5Hadoop伪分布式配置二.MapReduce 学习指南2.1上传文件到HDFS2.2安装 Eclipse2.3安装配置 Hadoop-Eclipse-Plugin2.4在 Eclipse 中操作 HDFS 中的文件2.5在 Eclipse 中创建 MapReduce 项目2.6运行 Map
2020-12-18 21:09:03 588
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人