准备:
eclipse
hadoop完全分布式
编译得到hadoop-eclipse-plugin-2.7.7.jar
github下载:hadoop.dll winutils.exe
1.eclipse添加插件:
将hadoop-eclipse-plugin-2.7.7.jar放到eclipse的安装目录plugins下
2.配置hadoop的环境变量
3.添加wind下的Hadoop兼容性插件
hadoop.dll添加到C:\Windows\System32下
winutils.exe添加到hadoop安装目录bin下
4.若已经打卡eclipse,则重启
5.配置界面
1)将Hadoop的环境变量添加到eclipse中
windows——preference——搜Hadoop 导入hadoop安装目录
配置Hadoop通信:windows——show view——others得到以下界面,空白处右键新建
连通后文件可见
Hadoop的hdfs的api调用:
建工程:
- 导入jar包,右键build path
优点:代码移动不用重新导包
缺点:jar冲突不好解决,工程过于臃肿
- 使用maven管理jar包
优点:jar包管理方便,解决jar包管理冲突
缺点:代码移动需要重建工程
- 手动建立一个jar包依赖库