MapReduce
嘉平11
这个作者很懒,什么都没留下…
展开
-
MR——实现二次排序
ps: 一、字符串比较用compareTo()时: 1,长度相同,从第一位开始比较,如果相同返回0,如果不同则马上返回这两个字符的ascii值的差值。 2,长度不同,直接返回长度差值。 二、Integer比较用compareTo()时: 1,对比数字时相同,返回0。 2,对比数字不同时,返回-1。 实现每个人最喜欢的电影topN,按照uid、分数进行排序 一、 RateBea...原创 2020-03-03 19:07:29 · 424 阅读 · 0 评论 -
MR笔记01——调度、打包运行
一、提交jar包到hadoop之后,怎么运行: hadoop jar /zgm2/wc.jar z1wc.MyRunner /data/wcount /out/zwcount hadoop jar可以换成yarn jar 如果你设置yarn为mapreduce的默认资源调度平台,那么两个命令是一样的 区别: hadoop jar 按mr1或yarn运行job,决定是否配置yarn。y...原创 2020-03-03 18:32:57 · 301 阅读 · 0 评论