MapReduce —案例(一)求最高分,最低分,平均分

表中的原始数据

computer,huangxiaoming,85
computer,xuzheng,54
computer,huangbo,86
computer,liutao,85
computer,huanglei,99
computer,liujialing,85
computer,liuyifei,75
computer,huangdatou,48
computer,huangjiaju,88
computer,huangzitao,85
english,zhaobenshan,57
english,liuyifei,85
english,liuyifei,76
english,huangdatou,48
english,zhouqi,85
english,huangbo,85
english,huangxiaoming,96
english,huanglei,85
english,liujialing,75
algorithm,liuyifei,75
algorithm,huanglei,76
algorithm,huangjiaju,85
algorithm,liutao,85
algorithm,huangdou,42
algorithm,huangzitao,81
math,wangbaoqiang,85
math,huanglei,76
math,huangjiaju,85
math,liutao,48
math,xuzheng,54
math,huangxiaoming,85
math,liujialing,85

需要求的第一问:

以上所有的是数据,该数据每行有三个字段值,分别是course,name,score

现在求:

1、每一个course的最高分,最低分,平均分
返回结果格式:
course	max=95	min=22	avg=55
例子:
computer	max=99	min=48	avg&
  • 7
    点赞
  • 36
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
好的,这是一个典型的MapReduce任务。首先,我们需要定义Map和Reduce函数的实现逻辑。 Map函数的输入为原始数据,它将原始数据转化成键值对的形式,并将其输出。 在这个任务中,我们可以将每一门课程的成绩数据看作一条原始数据,进行如下处理: - 将原始数据按照课程名称作为键,成绩作为值,输出键值对。 例如,一个成绩数据为:"语文,75",经过Map函数处理后,输出键值对:"语文" -> 75。 Reduce函数的输入为Map函数输出的键值对,它将相同键的值进行聚合,并进行计算,最后输出结果。 在这个任务中,我们需要对每一门课程的成绩进行最高分最低平均分的计算,可以按照如下方式实现: - 对于每个键值对,将值保存到一个列表中。 - 对列表进行排序,取出最大值、最小值,并计算平均值。 - 输出最大值、最小值平均值。 最终的MapReduce程序实现如下: ``` // Map函数 function map(key, value): // 将原始数据按照课程名称作为键,成绩作为值,输出键值对 emit(key, value) // Reduce函数 function reduce(key, values): // 对于每个键值对,将值保存到一个列表中 value_list = [] for value in values: value_list.append(value) // 对列表进行排序,取出最大值、最小值,并计算平均值 value_list.sort() max_value = value_list[-1] min_value = value_list[0] avg_value = sum(value_list) / len(value_list) // 输出最大值、最小值平均值 emit(key, (max_value, min_value, avg_value)) ``` 以上是MapReduce程序的逻辑,具体实现需要根据你使用的编程语言和框架进行调整。
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值