首先说下我的环境。
1.使用VM创建三个虚拟机安装ubuntu 16.04系统
2.在ubuntu 16.04系统里安装hadoop2.8.1 并启动成功(安装方法网搜下,一般都差别不大,学习使用配置基本不是很全,但能保证启动成功)。
3.window7 64位系统上面开发,远程连接hadoop。
4.安装eclipse插件:hadoop-eclipse-plugin-2.6.0.jar,github上下载地址:https://github.com/winghc/hadoop2x-eclipse-plugin/tree/master/release
把其copy到eclipse的程序目录plugin下,重启eclipse会有hadoop视图会出现(eclipse配置hadoop网上都有差别不大)。
4.使用eclipse连接hdfs。路径一般为:hdfs:你的IP:9000。如下图:
接下来就是创建mapreduce项目,