mapreduce实例
smallpizza
这个作者很懒,什么都没留下…
展开
-
mapreduce计算平均值
当我们有每一位同学的每一科成绩时,我们计算他们的平均成绩,用传统的方法比较麻烦,如果我们用hadoop中MapReduce组件的话就比较简单了。 测试数据如下: 代码如下:import java.io.IOException;import java.util.Iterator;import java.util.StringTokenizer;import org.apache.hadoo原创 2017-09-17 21:10:49 · 4504 阅读 · 0 评论 -
mapreduce topN算法实现 获取前10个音乐数据
上次通过爬虫获取了音乐的数据,并把数据导入到hdfs中,根据他的点击量获取前10个音乐,测试了半天现在终于弄好了,分享一下,如有更好的思路请指教。 部分原始数据(主要用于测试)如下: 代码如下:import java.io.IOException;import java.net.URI;import java.util.Collections;import java.util.Comp原创 2017-09-12 22:18:42 · 4787 阅读 · 0 评论