1、增加调试信息寻找问题
2、两种方式解决unable to load native-hadoop library for you platform
附:libc/glibc/glib简介
参考:
1、http://my.oschina.net/swuly302/blog/515853【66号公路: Hadoop Unable to load native-hadoop library for your platform】
2、http://blog.sina.com.cn/s/blog_4eca88390102vn86.html
增加调试信息寻找问题
在执行hdfs命令时,会有一个警告:
WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
我们增加调试信息看问题出在了哪里。
增加调试信息有两种方式,
1、在执行命令前加一条如下命令:
export HADOOP_ROOT_LOGGER=DEBUG,console
比如:
[wangqi@node001 ~]$ export HADOOP_ROOT_LOGGER=DEBUG,console [wangqi@node001 ~]$ hdfs dfs -ls /
2、在$HADOOP_CONF_DIR/log4j.properties(hadoop2.6.0的路径是/home/wangqi/software/hadoop-2.6.0/etc/hadoop/log4j.properties)文件中添加如下代码:
log4j.logger.org.apache.hadoop.util.NativeCodeLoader=DEBUG
我选择的是第二种(因为后面的一种解决方案也需要动这个文件)。
然后执行一条命令,查看调试信息,如下:
[wangqi@node001 ~]$ hdfs dfs -ls / 16/01/05 15:05:49 DEBUG util.NativeCodeLoader: Trying to load the custom-built native-hadoop library... 16/01/05 15:05:49 DEBUG util.NativeCodeLoader: Failed to load native-hadoop with error: java.lang.UnsatisfiedLinkError: no hadoop in java.library.path 16/01/05 15:05