Windows下idea中实现Hadoop本地测试功能

0. 目标

1. Hadoop默认没有windows版本
2. Hadoop集群部署在Linux虚拟机上,
3. 通过idea编写的MR代码和输入文件要打包jar发送给Linux
4. 为便于测试MR代码是否正确, 希望在idea上运行MR

1. 解压hadoop到windows硬盘中

https://blog.csdn.net/wxfghy/article/details/80450469
windows7下java代码从远程hadoop服务上下载文件

2. idea中写入MR代码

将之前写过的wordcount写入Idea
https://blog.csdn.net/wxfghy/article/details/80490867

3. 导入本地hadoop文件夹中各组件jar

1. 进入Project Structure
   
2. 选择Modules
3. 选中Dependencies, 点击添加, 选择JARs or directories…选项
4. 添加本地hadoop目录中以下的文件夹