![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
mapreduce
IT雪
run
展开
-
mapreduce-找出共同好友
1、原始数据A:B,C,D,E,OB:A,C,E,KC:F,A,D,ID:A,E,F,LE:B,C,D,M,LF:A,B,C,D,E,O,MG:A,C,D,E,FH:A,C,D,E,OI:A,OJ:B,OK:A,C,DL:D,E,FM:E,F,GO:A,H,I,J2、解题思路: 第一步:map读一行 A:B,C,D,E,O输出 <...原创 2018-10-17 21:54:33 · 270 阅读 · 0 评论 -
mapreduce-多个文件的输入,实现每个单词的文件次数倒序排序
1、第一次mapreducepackage cn.itcast.mr.combineSort2;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;...原创 2018-10-17 21:55:03 · 785 阅读 · 0 评论 -
MapReduce中自定义文件输出名
MR的输出结果默认为part-r-00000,我们可自定义易识别的名字替代part,如score-r-00000/ job.setOutputFormatClass(MyOut.class); MyOut.setOutputName(job, "score");//自定义输出名 job.waitForCompletion...转载 2018-10-22 16:32:09 · 574 阅读 · 0 评论