Hadoop2.7.2源码在64位Centos Linux下编译

一.在Hadoop官网上下载源码包 

1. 在 Hadoop官网上下载hadoop-2.7.2的源码包，下载地址： http://mirrors.noc.im/apache/hadoop/common/hadoop-2.7.2/hadoop-2.7.2-src.tar.gz 
2. 把下载下来的源码包，上传到linux上，在这里我放在了/home/soft/下

二.准备linux上运行环境 

1. 上传jdk、ant、maven、protobuf等到到linux上，在这里我放在了/home/soft/下 
2. 安装jdk 
使用命令：rpm -ivh jdk-7u67-linux-x64.rpm 
安装完后配置环境变量，修改/etc/profile文件，命令：vi /etc/profile 
在最后添加内容： 
export JAVA_HOME=/usr/ Java /jdk1.7.0_67/ 
export PATH=$PATH:$JAVA_HOME/bin
使用命令生效：source /etc/profile 
测试：java -version 
3.安装maven 
解压maven到/opt/目录下，并配置环境变量 
解压命令：tar -zxvf apache-maven-3.3.9-bin.tar.gz -C /opt/ 
修改/etc/profile文件，在文件末尾新增下面两行内容： 
export MAVEN_HOME=/opt/apache-maven-3.3.9 
export PATH= $PATH:$ MAVEN_HOME/bin 
使用命令生效：source /etc/profile 
4.安装g++ 
安装命令：yum -y install gcc gcc-c++ 
5.安装protobuf 
解压protobuf到当前目录 
解压命令：tar -zxvf protobuf-2.5.0.tar.gz 
cd protobuf-2.5.0/ 
编译安装 
预编译命令：./configure –prefix=/opt/protobuf-2.5 
编译和安装命令：make && make install 
配置环境变量，修改/etc/profile文件，末尾添加下面两行内容： 
export PROTOBUF_HOME=/opt/protobuf-2.5 
export PATH=$PATH:$ PROTOBUF_HOME/bin 
使用命令生效：source /etc/profile 
6.安装openssl 
安装命令：yum -y install openssl-devel 
7.安装cmake 
安装命令：yum -y install cmake 
8.安装ant 
解压maven到/opt/目录下，并配置环境变量 
解压命令：tar -zxvf apache-ant-1.9.7-bin.tar.gz -C /opt/ 
修改/etc/profile文件，在文件末尾新增下面两行内容： 
export ANT_HOME=/opt/apache-ant-1.9.7/ 
export PATH=$PATH:$ ANT_HOME/bin 
使用命令生效：source /etc/profile

三.编译 

1.解压hadoop-2.7.2 tar包 
解压命令：tar -zxvf hadoop-2.7.2-src.tar.gz 
2.编译 
cd hadoop-2.7.2-src 
编译命令：mvn package -Pdist,native -DskipTests -Dtar 
3.编译成功并查看 
编译完成后，在hadoop-dist/target/目录下查看，会有hadoop-2.7.2.tar.gz这个文件 

四.问题总结 

编译过程中会报各种错，可以直接终止编译，在重新执行编译，多执行几次就可以了，一般都是因为网络原因jar包下载有问题或maven仓库连接超时等原因，我共执行了5次就成功了。在说明下，我在用root用户执行编译的，如果用其他的用户编译可能会存在权限问题。