Windows下使用IDEA+Maven搭建本地Hadoop环境

IDEA结合Maven搭建本地MapReduce环境

前言

Hadoop的开发中需要很多的依赖包，相互之间的关系较为复杂，依赖包之间复杂的关系就导致了搭建Hadoop的过程中会遇到各种报错，费心费神还调试不好，真是让人苦恼。

Maven是一个依赖管理和项目构建的工具，它利用惯例组织Java项目的结构，并允许通过简单的配置定义直接依赖，而直接依赖所需的其他依赖则会通过事先定义好的关系列表自动下载，大大节省了开发者本身的工作量。

使用Maven管理依赖，可以把MapReduce程序看出一个普通的Java程序一样来运行和调试，不需要在真实的分布式Hadoop集群上运行，真是好用又方便。

Maven是一个项目管理工具，在主流的Java IDE上都有插件。这里我们推荐使用IntelliJ IDEA来配合Maven，相比于Eclipse，IDEA更智能、更迅速、体验更佳。以 IDEA Ultimate 2019.3 版本为例，它自带了Maven支持，都不需要安装插件。

环境

1. JDK 1.7及1.7以上版本
2. IntelliJ IDEA Ultimate

不需要安装任何形式的Hadoop集群

如果不知道 IDEA怎么下载和安装的，可以参考另一篇博客 Windows下配置IDEA开发环境

配置Maven

新建项目

配置Maven的时候请一定要保持网络连接，不要断网

打开 IDEA，新建一个项目。点击 $File$ -> $New$ -> $Project$

在弹出的对话框中选择 M