Hadoop入门系列（二）idea配置hadoop开发环境

最新推荐文章于 2024-08-08 07:55:25 发布

_DrZ_

最新推荐文章于 2024-08-08 07:55:25 发布

阅读量2w

点赞数 7

文章标签： idea hadoop plugins

本文链接：https://blog.csdn.net/qq_32938169/article/details/80209228

版权

主要分两部分:一、idea配置hadoop开发环境。二、idea安装hadoop插件。

一、

1.为了便于各个版本的hadoop获得对应jar包以及其依赖jar包。搭建maven项目是个很好的选择。创建一个无原型的maven项目。

2.在porn.xml的project内添加镜像网站和一些需要依赖的核心jar包。

注意：版本号对应自己hadoop的版本号。有些通用包比如hadoop-core，在maven中版本较低，现在只有1.2.1, 现在通常都用2.X版本都hadoop，我们分别依赖对应包可解决。如下图：

<repositories>
    <repository>
        <id>nexus-aliyun</id>
        <name>nexus-aliyun</name>
        <url>http://maven.aliyun.com/nexus/content/groups/public/</url>
        <releases>
            <enabled>true</enabled>
        </releases>
        <snapshots>
            <enabled>false</enabled>
        </snapshots>
    </repository>
</repositories>
<dependencies>
    <dependency>
        <groupId>org.apache.hadoop</groupId>