Hadoop+idea+maven开发配置

最新推荐文章于 2022-11-22 11:04:13 发布

君君的城堡U

最新推荐文章于 2022-11-22 11:04:13 发布

阅读量5.3k

点赞数

分类专栏：大数据文章标签： hadoop idea maven

本文链接：https://blog.csdn.net/u012859945/article/details/52937893

版权

本文介绍了在Ubuntu环境下，如何利用IntelliJ IDEA和Maven搭建Hadoop项目。首先，详细讲述了安装Hadoop和IDEA的过程，接着创建了一个Maven项目，并在pom.xml中添加了Hadoop的依赖。然后编写了测试代码PutMerge，该代码读取本地文件系统中的文件并将其写入HDFS。最后，通过IDEA的构建功能以及Maven的命令行方式，生成并测试了jar包。

摘要由CSDN通过智能技术生成

idea是java开发的利器之一，其自身集成了maven，十分适用于大型项目的开发。大多数的Hadoop程序都是在idea下开发的，本文介绍了Hadoop+idea+maven的环境配置与开发测试

准备

在ubuntu下安装Hadoop，具体细节可见之前的博客
安装idea

建立项目

打开idea，选择 File---New---Project---Maven,接下来填写GroupId和ArtifactId，之后是项目名称和位置等等
新建项目后有提示 Maven project need to be imported ，选择导入

我们需要修改pom.xml文件，添加包的依赖关系。

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>


    <groupId>cn.yanjun.bigdata</groupId>
    <artifactId>bigdata</artifactId>