eclispe创建Hadoop，缺少包

最新推荐文章于 2024-04-15 15:28:23 发布

听见~

最新推荐文章于 2024-04-15 15:28:23 发布

阅读量623

点赞数 4

文章标签： hadoop 大数据分布式

本文链接：https://blog.csdn.net/qq_31636495/article/details/137082056

版权

本文介绍了如何在Hadoop项目中配置环境，包括添加必要的jar包到Eclipse工程的JavaBuildPath，以解决MapReduce编程中的问题。涉及到的库有hadoop-common,hadoop-mapreduce,hadoop-hdfs-client和yarn相关jar。

摘要由CSDN通过智能技术生成

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.Text;

import org.apache.hadoop.mapreduce.Job;
import org.apache.hadoop.mapreduce.Mapper;
import org.apache.hadoop.mapreduce.Reducer;
import org.apache.hadoop.mapreduce.lib.input.FileInputFormat;
import org.apache.hadoop.mapreduce.lib.output.FileOutputFormat;

报红

解决

引入hadoop安装($HADOOP_HOME)目录下的

share/hadoop/common/hadoop-common-3.1.1.jar

share/hadoop/common/lib/*.jar

share/hadoop/mapreduce/*.jar

share/hadoop/hdfs/hadoop-hdfs-client-3.1.1.jar

share/hadoop/yarn/*.jar