hadoop MapReduce计算总销售量，每个月的销售量，每个怕品牌的总销售量

最新推荐文章于 2022-12-25 22:56:43 发布

不言尘世

最新推荐文章于 2022-12-25 22:56:43 发布

阅读量3.4k

点赞数 2

分类专栏：大数据文章标签： hadoop MapReduce计算总销售量，每个月的销售量，每个怕品

本文链接：https://blog.csdn.net/weixin_43599377/article/details/103465143

版权

这篇博客介绍了如何利用MapReduce解决实际问题，具体是通过Hadoop实现对xiaomi、华为、IP三个手机品牌在2019年的销售数据进行分析。内容包括计算三个品牌总销量、各品牌销量以及每月销售总量，提供了详细的计算结果。

摘要由CSDN通过智能技术生成

今天来练习一下mapreduce的入门小知识点
准备数据如下截图
在这里插入图片描述
有IP xiaomi 华为三个手机品牌，在2019年中每个月每天都有销量
1 求三个品牌一年一共销售多少部手机

package com.sheng.hdfs;


import java.io.IOException;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.LongWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Job;
import org.apache.hadoop.mapreduce.Mapper;
import org.apache.hadoop.mapreduce.Reducer;
import org.apache.hadoop.mapreduce.lib.input.FileInputFormat;
import org.apache.hadoop.mapreduce.lib.output.FileOutputFormat;
//计算
//maper计算框架，输出：
class Mapper1 extends Mapper<LongWritable, Text,Text, IntWritable>{
	@Override
	protected void map(LongWritable key,Text values,Context context) throws IOException, InterruptedException {
		//得到每一行的值
		String lines =values.toString();
		//对每一行的字符串按逗号来分
		String[] s= values.toString().split(",");
		//输出：key值和value值
		 context.write(new Text("总销售量"), new IntWritable(Integer.parseInt(s[1])));
	}
}
//Reducer输出到Hadoop中：他的输入是mapper的输出
class WcReduce1 extends Reducer<Text, IntWritable,Text, IntWritable> {
	@Override
	protected void reduce(Text key,Iterable<IntWritable>values,Context context)throws IOException, InterruptedException{
		int sum=0;
		for (IntWritable val:values) {
			sum+=val.get();
		}
		context.write(key,new IntWritable(sum));
		
	}
	
}

public class Home1 {
	public static void main(String[] args)throws IOException, ClassNotFoundException, InterruptedException {
		Configuration conf = new Configuration();
   		// conf.set("HADOOP_USER_NAME","ambow");

   		// Job对像
   		Job job = Job.getInstance(conf);
   		// 注册Jar驱动类
   		job.setJarByClass(Home1.class);
   		// 注册Mapper驱动类
   		job.setMapperClass(Mapper1.class);