Unable to load native-hadoop library for your platform... using builtin-Java classes where applicabl...

最新推荐文章于 2020-03-23 11:57:47 发布
最新推荐文章于 2020-03-23 11:57:47 发布
阅读量80 收藏
点赞数
文章标签： 大数据 java

以前hadoop也有这个问题，没注意，用spark也提示，解决一下。

首先找到对应自己hadoop版本的的lib包，编译好后，名字类似hadoop-native-64-2.4.1.tar ，放到lib下的覆盖native。

export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib"

　　设置环境变量并生效。

　　还是不行。。

 　　

weixin_34150830
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Unable to load native-hadoop library for your platform... using builtin-java classes where applicabl
Johnmay--Blog
02-27 1124
[hadoop@masterBF hadoop-2.5.0]$ bin/hdfs dfs -ls / 17/02/27 21:36:37 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
Unable to load native-hadoop library for your platform... using builtin-java classes where applicabl...
weixin_33836223的博客
02-20 348
　　问题描述：      Unable to load native-hadoop library for your platform... using builtin-java classes where applicable  [hadoop@djt002 native]$ pwd/usr/local/hadoop/hadoop-2.6.0/lib/native[hadoop@djt0...
Spark记录-spark报错Unable to load native-hadoop library for your platform
weixin_30832351的博客
11-09 327
解决方案一： #cp $HADOOP_HOME/lib/native/libhadoop.so$JAVA_HOME/jre/lib/amd64 #源码编译snappy---./configure make & make install #cp libsnappy.so $JAVA_HOME/jre/lib/amd64 主要是jre目录下缺少了libhadoop.so和libs...
Hadoop 启动WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using
01-09
搭建hadoop 环境时遇到启动异常告警问题 “WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using builtin-java classes where applicable” 上来不多说，百度收集些相关...
Unable to load native-hadoop library for your platform...
05-30
Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 1. 下载文件native.rar 并解压 2. 用SecureFX 上传, 替换native目录下文件，选择二进制文件上传。 3. ...
hadoop-native-64-2.8.1.tar.7z
03-24
用这个64位替换了官方的32位的native Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
64位hadoop-2.6.0 lib/native.tar.gz
08-03
自己在网上下载了一个hadoop-2.6.0-cdh5.15.1版本的hadoop，启动hdfs时报错：WARN org.apache.hadoop.util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java ...
unable to load native-hadoop library,using buildtin-java classes where applicable的解决
persistence勿忘初心
03-23 2238
安装hadoop启动之后总有警告： WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 问题示例 原因： Apache提供的hadoop本地库是32位的，而在64位的服务器上就会有问题...
解决hadoop Unable to load native-hadoop library for your platform...
taizhen/blog
09-25 478
这种问题 主要是自己的机器是64 位的但是 hadoop  只有32位的原因造成的。 所以直接替换 hadoop /lib 下的native 目录就行 http://dl.bintray.com/sequenceiq/sequenceiq-bin/ 直接下载 在机器上：wget http://dl.bintray.com/sequenceiq/sequenceiq-bin/ha
spark集群进入 bin 下面目录./spark-shell 出现Unable to load native-hadoop library for your platform... using bu...
weixin_30251587的博客
03-24 198
spark集群启动的时候可以正常，进入./spark-shell 就会出现如下错误 配置文件：spark-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_51export SCALA_HOME=/home/hadoop/scala-2.11.6 export SPARK_MASTER_IP=master24export SPARK_MASTER...
spark执行的时候报Unable to load native-hadoop library for your platform警告
每天进步一点点
03-23 9657
原因： spark预先编译的hadoop版本为32位的，放在64位的机器上执行会报这个错误，解决办法 办法一、 在 ~/.bash_profile 设置一下 export LD_LIBRARY_PATH=$HADOOP_HOME/lib/native 办法二： 在spark的conf目录下，在spark-env.sh文件中加入LD_LIBRARY_PATH
spark出现 Unable to load native-hadoop library for your platform 解决方案
努力变得不菜的菜鸡的博客
07-14 1581
启动Spark on YARN 首先进入到bin目录下，在控制台输入命令： spark-shell --master yarn --deploy-mode client 出现下面的错误： 报错原因： 内存资源给的过小，yarn直接kill掉进程，则报rpc连接失败、ClosedChannelException等错误。 解决方法： 先停止YARN服务，然后修改yarn-site.xml，增加如下...
解决 Unable to load native-hadoop library for your platform
weixin_30659829的博客
11-13 570
安装hadoop启动之后总有警告：Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 原因：Apache提供的hadoop本地库是32位的，而在64位的服务器上就会有问题，因此需要自己编译64位的版本。 1、首先找到对应自己h...
hadoop Unable to load native-hadoop library for your platform
changyichen111的博客
04-27 382
出现这样的问题  Unable to load native-hadoop library for your platform... using builtin-java classes where applicable  1 jdk 安装 有问题  必须 是64-bit Server  2 是 libhadoop.so.1.0.0 是32位的吗 如果是 搞到64位 jdk
NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java class
bluetropic的专栏
05-22 5494
hadoop 安装调试案例 wordcount，小错误与解决办法 本实例的前提是，已经有INPUT目录和file01.txt  file02.txt并且已经提交到hdfs的in 目录里。 $mkdir input $echo "hello world">file01.txt $echo "hello world">file02.txt $bin/hadoop dfs -put inp
Hadoop “Unable to load native-hadoop library for your platform” error
Mrknowledge
01-21 1902
Question: I'm currently configuring hadoop on a server running CentOs. When I run start-dfs.sh or stop-dfs.sh, I get the following error: WARN util.NativeCodeLoader: Unable to load native-hadoop
WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
最新发布
12-20
根据提供的引用内容，当出现"WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable"的警告时，这意味着无法加载本地的hadoop库。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值