Hadoop（三）——利用MapReduce求平均成绩

最新推荐文章于 2024-05-22 10:46:11 发布
最新推荐文章于 2024-05-22 10:46:11 发布
阅读量7.1k 收藏 17
点赞数 3
分类专栏： Hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zm714981790/article/details/53727140
版权

环境配置

在linux中使用Eclipse编译运行MapReduce程序请参考这篇文章

数据集

输入数据集每一行是学生的名字和学生的成绩（一个学生可有多门学科成绩）；
在本地生成file1.txt file2.txt file3.txt三个文件并且上传到hdfs上的averageScore文件夹；
这里写图片描述

源代码

    public static class Map extends Mapper<LongWritable,
最低0.47元/天 解锁文章
mmい
关注
  • 3
    点赞
  • 踩
  • 17
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
基于MapReduce的学生平均成绩统计
06-06
利用MapReduce实现了求学生成绩的最大值，最小值，及成绩分布。结合我的博客“MapReduce之学生平均成绩”看，效果更好。
MapReduce简单实例1——统计各同学的最高分、最低分、平均分以及选修的课程总数
m0_52857498的博客
04-06 4177
MapReduce简单实例1——统计各同学的最高分、最低分、平均分以及选修的课程总数并以规定格式输出
24 使用MapReduce编程统计各科目成绩最高的学生
最新发布
lydia88的专栏
05-22 1370
2.创建Maven项目，修改配置pom.xml文件，添加log4j.properties(步骤省略)7.编写Driver模块此类需要继承 Configured 实现 Tool接口。最后直接运行主类ScoreCount.1.准备测试数据并上传至HDFS中。3.自定义值的类型Student。(1)当前项目下生成jar文件。5.编写Reducer模块。（2）控制台输出了日志信息。4.编写Mapper模块。6.编写JarUtil。
MR案例（3）：计算学生成绩（总分和平均分）
Kox_233的博客
12-19 1241
MR案例：计算学生成绩（总分和平均分）
Hadoop实战（一）之统计平均分
weixin_45659364的博客
11-23 2015
Hadoop实战（一）之统计平均分 提示：这里可以添加系列文章的所有文章的目录，目录需要自己手动添加 例如：第一章 Python 机器学习入门之pandas的使用 提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录Hadoop实战（一）之统计平均分前言一、mapreduce是什么？二、项目分析1.项目要求2.开始编写代码2.1.编写mapper类2.2.自定义数据格式，新建一个类2.3.重写reducer类2.4.main方法3.运行代码，测试总结 前言 Hadoop中分为hd
Hadoop编写MapReduce之统计学生平均成绩
Sartin的博客
04-24 8775
目录标题统计学生的平均成绩先在集群里创建几个文件文件写好就上传到分布式文件系统编写JAVA程序Score.java转成jar包，放入集群编译成功查看结果 统计学生的平均成绩 先在集群里创建几个文件 第一个：vim score.txt [hadoop@master mapreduce]$ cd [hadoop@master ~]$ ls hadoop-2.7.7.master.tar.gz ...
【Hadoop学习项目】3. 求平均值 + 使用combine
STAR GAME
02-03 1327
0. 项目结构 1. AvgDriver.java package hadoop_test.avg_demo_03; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Path; import org.apache.hadoop.io.DoubleWritable; import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.Tex
求学生平均成绩MapReduce实例
08-25
求学生平均成绩MapReduce实例 对输入文件中的数据进行计算求学生的平均成绩；输入文件中的每行内容均为一名学生的姓名和他相应的成绩。
Hadoop原理与技术MapReduce实验
05-24
（1）熟悉Hadoop开发包 （2）编写MepReduce程序 （3）调试和运行MepReduce程序 （4）完成上课老师演示的内容 二、实验环境 Windows 10 VMware Workstation Pro虚拟机 Hadoop环境 Jdk1.8 二、实验内容 1.单词计数实验...
MapReduce求行平均值--MapReduce案例
11-22
本案例主要探讨如何使用MapReduce来求取数据集的行平均值，这在数据分析、数据挖掘以及日志分析等场景中非常常见。我们将讨论四种不同的方法来实现这一目标，针对已处理（包含行号）和未处理的数据集。 首先，我们...
详细介绍Hadoop家族中的MapReduce原理
12-26
详细介绍 Hadoop 家族中的 MapReduce 原理 MapReduce 是 Hadoop 家族中的核心组件之一，是一个分布式运算程序的编程框架。MapReduce 的核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式...
Hadoop 分析统计学生考试成绩1
08-08
Hadoop 分析统计学生考试成绩1
MapReduce求平均值示例程序
05-16
MapReduce求平均值示例程序，并且程序里利用了logger类，可以将调试信息输出到mapreduce的日志，可以根据输出信息了解运行机制
基于hadoop计算机平均分
12-29
基于java，利用mapreduce求平均分；包括程序、ppt和实训报告
MapReduce初级案例（3）：使用MapReduce实现平均成绩
codepython的专栏
01-04 7579
当我们看到这个例子的时候，我们是否想过： mapreduce是否可以完成我们传统开发中经常遇到的一些任务。例如排序、平均数、批量word转换等。它和我们传统开发有什么不同。 那么我们可以带着下面问题来阅读： 1.mapreduce是如何求平均值的？ 2.map在求平均值的作用是什么？ 3.reduce在求平均值的作用是什么？ 一、简介： "平均成绩"主要目的还是在重温经典"Wo
MapReduce编程(三) 求均值
我只是一个简单的Coder，为了兴趣和理想奋斗在生活的道路上
03-05 1051
一、问题描述三个文件中分别存储了学生的语文、数学和英语成绩，输出每个学生的平均分。数据格式如下： Chinese.txt张三 78 李四 89 王五 96 赵六 67Math.txt张三 88 李四 99 王五 66 赵六 77English.txt张三 80 李四 82 王五 84 赵六 86二、MapReduce编程pac...
MapReduce案例1——求学生成绩普通版
jin6872115的博客
03-16 1932
使用MapReduce求学生成绩：基础版computer,huangxiaoming,85computer,xuzheng,54computer,huangbo,86computer,liutao,85computer,huanglei,99computer,liujialing,85computer,liuyifei,75computer,huangdatou,48computer,huangj...
【细节拉满】Hadoop课程设计项目，使用idea编写基于MapReduce的学生成绩分析系统(附带源码、项目文件下载地址)
热门推荐
扎哇太枣糕的笔记博客
12-24 2万+
Hadoop课程设计项目，使用idea编写基于MapReduce的学生成绩分析系统(附带源码、项目文件下载地址)
Hadoop中求平均成绩
kingszelda的专栏
08-20 997
mport java.io.IOException; import org.apache.hadoop.fs.Path; import org.apache.hadoop.io.Text; import org.apache.hadoop.io.FloatWritable; import org.apache.hadoop.mapreduce.Job; import org.apache.hado
MapReduce实战：计算学生平均成绩与关联操作
在这个MapReduce编程实战文档中，重点探讨了如何利用MapReduce技术来计算学生平均成绩。平均成绩的实例旨在通过一个实际问题，让学生熟悉MapReduce模型的基本应用，它是自经典WordCount例子的扩展。 3.1 实例描述 ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值