Hadoop-2.8.4.tar.gz在centos6.9上编译

1.首先是JDK的安装：

选择版本jdk1.8_172(略)

2.安装依赖包：

yum -y install gcc-c++ build-essential autoconf automake libtool cmake zlib1g-dev pkg-config libssl-devua svn openssl-devel ncurses-devel

3.安装maven,推荐maven-3.5.4

chmod 755 apache-maven-3.5.4-bin.tar.gz

tar -zxvf apache-maven-3.5.4-bin.tar.gz

配置环境变量：

vim /etc/profile

export M2_HOME=/opt/apache-maven-3.5.4
export PATH=$PATH:$M2_HOME/bin

之后保存，source /etc/profile

测试：mvn -v

安装Findbugs

chmod 755 findbugs-3.0.1.tar.gz

tar -zxvf findbugs-3.0.1.tar.gz

vim /etc/profile

export FINDBUGS_HOME=/opt/findbugs-3.0.1
export PATH=$PATH:$FINDBUGS_HOME/bin

source /etc/profile

测试：findbugs -version

安装 ProtocolBuffer 2.5.0 

chmod 755 protobuf-2.5.0.tar.gz 

tar -zxvf protobuf-2.5.0.tar.gz 

测试：protoc --version

修改maven setting.xml

添加阿里云

 <mirror>
        <id>alimaven</id>
        <mirrorOf>central</mirrorOf>
         <name>aliyun maven</name>
        <url>http://maven.aliyun.com/nexus/content/groups/public/</url>
        </mirror>
        <mirror>
        <id>mirrorId</id>
        <mirrorOf>repositoryId</mirrorOf>
        <name>Human Readable Name for this Mirror.</name>
        <url>http://my.repository.com/repo/path</url>
        </mirror>

安装Ant

tar -zxvf apache-ant-1.9.4-bin.tar.gz

配置环境变量：

#Ant
export ANT_HOME=/opt/apache-ant-1.9.4
export PATH=$PATH:$ANT_HOME/bin

测试：ant -version

安装Snappy

tar -zxvf snappy-1.1.1.tar.gz

cd snappy-1.1.1

./configure

make

make install

查看snappy文件库:ls -lh /usr/local/lib | grep snappy

开始编译hadoop:

tar -zxvf hadoop-2.7.5-src.tar.gz 

在编译之前防止java.lang.OutOfMemoryError:Java heap space堆栈问题，在centos系统中执行命令

export MAVEN_OPTS="-Xms256m -Xmx512m"

进入源码包下，执行命令进行编译:

cd /soft/hadoop-2.7.5-src/

mvn package -Pdist,native,docs -DskipTests -Dtar

 

编译成功之后，hadoop-2.8.4.tar.gz位于/soft/hadoop-2.8.4-src/hadoop-dist/target目录下，这是编译后文件夹的状态

ok,完事！