hadoop----MapReduce简单案例（续）

最新推荐文章于 2023-07-05 20:00:00 发布

小口天,

最新推荐文章于 2023-07-05 20:00:00 发布

阅读量474

点赞数

分类专栏： Hadoop

本文链接：https://blog.csdn.net/WQY992/article/details/89812966

版权

该博客介绍了如何使用Hadoop的MapReduce处理气象数据，通过map和reducer函数找出数据集中记录的最高气温。博主详细讲解了每个阶段的操作，包括驱动类的设置、测试过程以及如何在IDE中运行和查看结果。

摘要由CSDN通过智能技术生成

找出气象数据集中的最高气温

map函数

import java.io.IOException;

import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.LongWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Mapper;

/**
 * 
 * 根据全球气象温度数据：统计每年的最高气温
 * 原始数据：
 * 0029029070999991901010106004+64333+023450FM-12+000599999V0202701N015919999999N0000001N9-00781+99999102001ADDGF108991999999999999999999
 * 0029029070999991901010113004+64333+023450FM-12+000599999V0202901N008219999999N0000001N9-00721+99999102001ADDGF104991999999999999999999
 * 0029029070999991901010120004+64333+023450FM-12+000599999V0209991C000019999999N0000001N9-00941+99999102001ADDGF108991999999999999999999
 *      
 *      KEYIN:   LongWritable
 *      VALUEIN: Text
 *      KEYOUT:  Text
 *      VALUEOUT: IntWritable
 *             map阶段
 *     
 *     k1 v1 
 *     0  0029029070999991901010106004+64333+023

最低0.47元/天解锁文章

小口天,

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
hadoop----MapReduce简单案例（续）

找出气象数据集中的最高气温map函数import java.io.IOException;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io.Text;import org.apache.hadoop.mapreduce...
复制链接

扫一扫

专栏目录