![](https://img-blog.csdnimg.cn/20210621232301186.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
MapReduce
。 。
不争气大王
毕业跑路了,大家加油。
展开
-
初步学习MapReduce编程——词频统计
闭着眼睛的MapReduce词频统计原创 2021-06-21 23:51:26 · 783 阅读 · 0 评论 -
初步学习MapReduce编程——视频类型统计
视频类型统计原创 2021-06-22 00:19:44 · 330 阅读 · 1 评论 -
初步学习MapReduce编程——获取成绩表的最高分成绩
1、实验目的(1)通过实验掌握MapReduce编程编程的基本方法(2)通过MapReduce编程来实现一些常用的数据处理方法,包括求最大值、去重等。2、实验内容1、训练要点(1)掌握MapReduce的执行流程。(2)掌握基础的MapReduce程序编写。(3)掌握MapReduce程序的输出/输出格式。2、需求说明有一个样例文件subject_score,即成绩表A。文件中的每一行数据包含两个字段:科目和分数。要求获取成绩列表中每个科目成绩最高的记录,并将结果输出到最高成绩表B。3、原创 2021-06-22 13:23:13 · 5870 阅读 · 4 评论 -
初步学习MapReduce编程——编程实现文件合并和去重操作
对于两个输入文件,即文件A和文件B,编写MapReduce程序,对两个文件进行合并,并剔除其中重复的内容,得到一个新的输出文件C。数据放TXT文件时,不能多出数据外的空行光标,不然运行程序时会显示错误:For input string: “”直接运行Java代码得出结果package Merge;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs原创 2021-06-22 11:41:45 · 6366 阅读 · 4 评论 -
初步学习MapReduce编程——编写程序实现对输入文件的排序
现在有多个输入文件,每个文件中的每行内容均为一个整数。要求读取所有文件中的整数,进行升序排序后,输出到一个新的文件中,输出的数据格式为每行两个整数,第一个数字为第二个整数的排序位次,第二个整数为原待排列的整数。运行Java代码直接得出结果package Mersort;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import原创 2021-06-22 11:48:10 · 4919 阅读 · 12 评论