记录hadoop的运行，在本地eclipse中运行和在虚拟机上运行

最新推荐文章于 2022-07-11 21:51:56 发布

fei阿fei

最新推荐文章于 2022-07-11 21:51:56 发布

阅读量224

点赞数

文章标签： hadoop

本文链接：https://blog.csdn.net/weixin_46834409/article/details/106458820

版权

本文记录了如何在本地Eclipse环境中和虚拟机上运行Hadoop程序。在Linux环境中，使用命令`hadoop jar MaxTemperature.jar MaxTemperature /data.txt /out`执行，其中/data.txt和/out为路径参数。而在Eclipse中运行，需要进行特定的配置修改。

摘要由CSDN通过智能技术生成

主程序入口函数，如果在linux中运行需要执行命令：
hadoop jar MaxTemperature.jar MaxTemperature /data.txt /out
/data.txt /out 两个需要传递给程序的参数，是路径

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.conf.Configured;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Job;
import org.apache.hadoop.mapreduce.lib.input.FileInputFormat;
import org.apache.hadoop.mapreduce.lib.output.FileOutputFormat;
import org.apache.