该博客介绍了一个使用Hadoop处理气象站历史数据的实例，通过MapReduce找出每年的最高气温。首先，从特定网站下载1901和1902年的气象数据并上传至Hadoop集群。接着，创建项目并编写Mapper和Reducer程序，Mapper负责提取年份和温度，Reducer则找出最大值。最后，运行程序得到最高温度结果：1901年317，1902年244。
本例子是从气象站中保存的历史气象信息里面提取出每年的最高气温来，其大致过程如下：
准备天气数据（详情请看hadoop权威指南附录气象数据）
在 http://www.hadoopbook.com/ 下载天气数据文件 1901.gz 1902.gz
上传数据到服务器
创建hadoop添加数据文件夹 hadoop dfs –mkdir /ncdc
将天气数据添加到hadoop节点
hadoop dfs –put /usr/local/1901 1902 /ncdc
查看是否已经上传
hadoop dfs –ls /ncdc
eclipse配置hadoop环境（可以搜索相关文章）
新建mapreduce项目
编码
最低0.47元/天 解锁文章
1988
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
