一、前提要求:
hadoop,具体配置可以参考我的另一篇文章。
https://mp.csdn.net/postedit/88987414
二、环境搭建
配置方法及插件下载链接如下:
https://github.com/winghc/hadoop2x-eclipse-plugin
1、下载并解压插件包
(git clone https://github.com/winghc/hadoop2x-eclipse-plugin.git)
2、 重新编译插件为你所需要的hadoop版本,这里我用的是hadoop-2.8.5
①切换至插件包下的src/contrib/eclipse-plugin文件夹。
②ant编译插件(由于版本不同,依赖jar文件不同等原因,这里会报很多错,下面以hadoop2.8.5为例)
ant jar -Dversion=2.8.5 -Dhadoop.version=2.8.5 -Declipse.home=/opt/tools/eclipse -Dhadoop.home=/opt/tools/hadoop
※切记,在执行之前,先将src/contrib/eclipse-plugin/build.xml中第68行处<target>标签的depends属性中的后半部分ivy-resolve-common去掉,否则编译会非常慢。
这次编译会很快执行完成,并报错,错误信息如下:
没有找到build.xml文件中第119行所引用的,/opt/tools/hadoop/share/hadoop/common/lib/commons-collections-3.2.1.jar文件。
用grep命令查看一下,原来是版本没有对应上,版本号改之!
结果发现,build.xml文件中,通过通配符引用了各个jar文件的版本号,具体修改位置不在这个文件中, 这个如何是好?
别慌,再仔细看看提供插件的网页,最下方编译问题解决方案: