hadoop学习--数据排序

该博客介绍了如何使用Hadoop MapReduce进行数据排序。通过编写MapClass和Reduce类,利用MapReduce的默认排序功能,实现对整数的排序。在Map阶段,将输入数据转换为<IntWritable, IntWritable>,在Reduce阶段进行聚合并输出排序后的结果。运行示例展示了从输入文件到排序后输出文件的过程。" 139165307,22501233,模拟目录管理功能:华为OD机试算法解析,"['算法', '数据结构', '路径处理']

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

对输入文件中的数据进行排序,输入文件中每行为一个数字。输出的每行为2个间隔的数字,第一个代表序号,第二个代表原始数字。

输入:

2
7
5
1
7
6
8
7

输出:

1 1
2 2
3 5
4 6
5 7
6 7
7 7
8 8

1、设计思路

在map过程中就有排序,因此利用这个默认的排序。并将其作为key值输出。reduce得到<Key,value-list>,将key值作为value输出,根据value-list的个数确定输出次数。此外还需要输出num,表示次序。

代码如下:

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

文宇肃然

精神和物质鼓励你选一个吧

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值