centOS6.5-64位系统下编译hadoop2.2.0源码解决依赖本地库问题

1.需要安装jdk、maven、protoc2.5.0环境,下载hadoop2.2.0、 protoc2.5.0等 源码包
2.jdk、maven安装并配置环境变量很简单,这里不介绍。
3.安装protoc依赖的gcc等支持:
    (1)yum install gcc 
    (2)yum intall gcc-c++
    (3)yum install make
    (4)yum install cmake
    (5)yum install openssl-devel  
    (6)yum install ncurses-devel
4.安装protoc2.5.0并配置环境变量:
    (1)tar -zxvf protobuf-2.5.0.tar.gz
    (2)cd protobuf-2.5.0 
    (3)./configure --prefix=/opt/protoc/
    (4)make && make install 
    (5)vi /etc/profile,在最后面添加如下内容:
         export PROTOC_HOME=/opt/protoc
         export PATH=$PROTOC_HOME/bin:$PATH
    (6)source /etc/profile
5.最新的Hadoop 2.2.0 的Source Code 压缩包解压出来的code有个bug 需要patch后才能编译:
    (1)wget https://issues.apache.org/jira/secure/attachment/12614482/HADOOP-10110.patch; patch -p0 < HADOOP-10110.patch 
6.编译hadoop:
    (1)cd hadoop-2.2.0-src
    (2)mvn package -DskipTests -Pdist,native -Dtar
7.替换掉32位的native库,用 ./hadoop-dist/target/hadoop-2.2.0/lib/native替换掉 /hadoop-2.2.0/lib/native
    (1)   rm -rf ~/local/opt/hadoop-2.2.0/lib/native
    (2)cp ./hadoop-dist/target/hadoop-2.2.0/lib/native ~/local/opt/hadoop-2.2.0/lib/

注:确保机器能连接互联网,maven配置的setting.xml文件最好将中心仓库修改为国内maven仓库,因为中心仓库网址在国外访问可能很慢或访问失败
    
    
  
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值