hadoop native lib install

原创 2015年07月10日 11:14:07

系统环境CentOS 6.5 final

hadoop 版本 CDH5.3.3

hadoop checknative -a 

[root@pmaster2 ~]# hadoop checknative -a
15/07/10 11:16:10 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
Native library checking:
hadoop:  false
zlib:    false
snappy:  false
lz4:     false
bzip2:   false
openssl: false
15/07/10 11:16:10 INFO util.ExitUtil: Exiting with status 1  


基本步骤:1、下载jdk1.7并安装

2、下载maven:maven.apache.org 并安装

3、安装protocol buffers(protobuf-2.5.0.tar.gz)

注意:需提前安装以下工具:

1)yum install gcc

2)yum install gcc-c++

3)yum install make

然后执行以下命令解压缩protobuf

tar -zxvf protobuf-2.5.0.tar.gz

会生成一个文件夹protobuf-2.5.0,执行以下命令编译protobuf。

#cd protobuf-2.5.0
#./configure --prefix=/usr/local/protoc/#make && make install

只要不出错就可以了。执行完毕后,编译后的文件位于/usr/local/protoc/目录下,我们设置一下环境变量

通过 protoc --version 验证是否成功

4、安装其它依赖

yum install cmake
yum install openssl-devel

yum install ncurses-devel

5、编译原码
执行以下命令解压缩
jdk
tar -zxvf hadoop-2.6.0-src.tar.gz
现在进入到目录/usr/local/hadoop-2.6.0-src中,执行命令mvn package -DskipTests -Pdist,native 


编译后的代码在/usr/local/hadoop-2.6.0-src/hadoop-dist/target下面的hadoop-2.6.0 







版权声明:本文为博主原创文章,未经博主允许不得转载。

相关文章推荐

hadoop 2.6 完全分布式安装过程及记录 (详细版)

1.首先是编译hadoop2.6 当然也可以安装二进制版本的,不过用别人编译的二进制有时是容易出问题的,因为每个二进制文件是依赖于你的linux下的lib的,lib好找,问题在于版本的兼容问题!所以...

CentOS hadoop native lib

  • 2016-01-14 10:46
  • 1.10MB
  • 下载

hadoop2.2.0-lib-native-macos.zip

  • 2015-06-21 20:39
  • 714KB
  • 下载

maven install到WEB-INF下的classes,lib

maven install到WEB-INF下的classes,lib

hadoop-native-lib-x64-2.7.3.tar.gz

  • 2017-09-11 14:31
  • 1.87MB
  • 下载

遇到问题----------安装DBD:mysql时报错install_driver(mysql) failed: Can't load '/usr/lib64/perl5/site_perl/5.8

安装步骤:Perl安装DBDmysql操作mysql数据库 DBI已经成功安装。 安装完DBD后运行脚本 报错: install_driver(mysql) failed: Can't loa...

mac hadoop2.6.0 lib/native

  • 2016-07-02 13:35
  • 742KB
  • 下载

hadoop2.8.1 64bit native 编译

  • 2017-10-04 22:52
  • 1.94MB
  • 下载

安装f8app react-native项目时 nmp install 出错

1.错误 npm ERR! Windows_NT 6.1.7601 npm ERR! argv "D:\\nodejs\\node.exe" "D:\\nodejs\\node_modules\\np...
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:深度学习:神经网络中的前向传播和反向传播算法推导
举报原因:
原因补充:

(最多只允许输入30个字)