Eclipse关联Hadoop源码
创建一个JAVA项目,在src目录下添加$HADOOP_HOME/src下的如下文件夹:
core、hdfs、mapred(目录结构出错:移除后重新添加)
导入后因为缺少jar包,报错。需要导入以下jar包:
$HADOOP_HOME/lib目录下的所有jar包
$HADOOP_HOME/lib/jsp-2.1目录下的所有jar包
ant.jar
对于DFSClient.java的错误 import.sun.net.util.IPAddressUtil
出错原因:sun开头是私有,不公开的一些API,用于开发JDK
解决:在属性页面的Libary替换JDK
关于启动/关闭Hadoop是出现的警告(Hadoop1.1.2):
Warning: $HADOOP_HOME is deprecated
查看$HADOOP_HOME/bin下的hadoop-config.sh,关键代码如图下所示:
因此,解决办法如下:
在/etc/profile文件中添加:export HADOOP_HOME_WARN_SUPPRESS=1
执行source /etc/profile
重新启动Hadoop问题解决