hadoop权威指南例子
文章平均质量分 77
hzn11
这个作者很懒,什么都没留下…
展开
-
Map/Reduce二次排序与分组分区用法
我对二次排序的定义就是先按照Key值排序,在Key相同的时候比较Value的值数据来源于某程序网的测试数据集输入1,mr1,32342,mr2,1233,mr3,98774,mr4,3485,mr5,123456,mr6,66467,mr7,988,mr8,123451,mr1,3342,mr2,31233,mr3,974,mr4,2315,mr5,122原创 2017-02-28 15:50:30 · 518 阅读 · 0 评论 -
Map/Reduce 求TopK
输入1,mr1,32342,mr2,1233,mr3,98774,mr4,3485,mr5,123456,mr6,66467,mr7,988,mr8,12345输出8 123455 123453 9877代码:import java.io.*;import org.apache.hadoop.conf.Configured;import org.apac原创 2017-02-28 16:09:57 · 329 阅读 · 0 评论 -
权威指南中Maxtemperature
在hadoop权威指南书中,其中的代码部分需要对java有一定基础的人才知道缺少哪些jar包,本文为了方便没有java基础,但是对hadoop感兴趣的人学习用的原创 2017-01-22 14:01:04 · 433 阅读 · 0 评论 -
Map/Reduce实现表的自连接
输入Tom LucyTom JackJone LocyJone JackLucy MaryLucy BenJack AliceJack JesseTerry AliceTerry JessePhilip AlmaMark TerryMark Alma输出grandchild grandparentJone JesseJone AliceTom JesseTo原创 2017-03-02 15:50:28 · 409 阅读 · 0 评论 -
编写Map/reudce的前置工作
利用的工具是eclipse,因为eclipse中有关于hadoop的插件,安装eclipse过程省略。1.下载hadoop-*-eclipse-plugin.jar放啊之在eclipse/pugin下 2.选择hadoop的安装目录,菜单->windows-preference3.选择菜单->Windows-Open Perspective->Other->Map/Redu原创 2017-02-27 16:37:56 · 290 阅读 · 0 评论 -
Map/Reduce进行排序与逆排序
MapReduce的排序与逆排序原创 2017-02-27 16:40:54 · 704 阅读 · 0 评论