Hadoop之编译源码

一：服务器，jar包等准备

1. 首先我们需要准备一台内存大约4G左右的服务器，2G的内存不一定够，4G的稳妥一点，并且
    最好是一个纯净版的服务器，就是除了网络，主机名之外其它什么都没有配置的。
2. 采用root用户编译，减少文件夹权限出现问题
3. 将准备好的包上传到服务器上           
    
4. 安装JDK
   A：将jdk解压到module文件夹，并且配置JAVA_HOME路径在/etc/profile
          
          
          效果：
            

二：开始配置MAVEN

1. 解压软件包到module
    
    
   修改settings.xml文件，配置阿里云仓库：
   

    <!-- 阿里云仓库 -->
       <mirror>
            <id>alimaven</id>
            <name>aliyun-maven</name>
            <url>http://maven.aliyun.com/nexus/content/groups/public/</url>
            <mirrorOf>central</mirrorOf>
        </mirror>
   	  <!-- 中央仓库1 -->
   	 <mirror>
   		<id>central</id>
   		<name>Maven Repository Switchboard</name>
   		<url>http://repo1.maven.org/maven2/</url>
   		<mirrorOf>central</mirrorOf>
        </mirror>
   	 <!-- 中央仓库2 -->
   	 <mirror>
   		<id>repo2</id>
   		<mirrorOf>central</mirrorOf>
   		<name>Human Readable Name for this Mirror.</name>
   		<url>http://repo2.maven.org/maven2/</url>
        </mirror>

2.  配置MAVEN的环境变量
    在/etc/profile中配置
             
        
     
     

三：开始配置ANT

1. 解压软件包
          
          
2.   配置ANT的环境变量
          
3.   效果
                 

四：安装glibc-headers 和g++命令

1. 安装glibc-headers
    命令：yum install glibc-headers
2. 安装g++
     命令：yum install gcc-c++         
3. 安装make
      命令：yum install make
4. 安装cmake 
     命令：yum install cmake

五：开始配置protobuf

1. 解压软件包
        
        
2.  开始配置protobuf
     a：进入到/opt/module/protobuf-2.5.0目录下，执行./configure命令
             
     b：在使用make命令编译一下
          
     c：使用make check命令
           
      d：执行make install
            
      e：执行ldconfig
            
      f：配置环境变量
             
             
           
3. 安装openssl库
    命令：yum install openssl-devel
    
4. 安装ncurses-devel库   
     命令：yum install ncurses-devel
         

六：开始编译源码

1.  将hadoop-2.7.2-src.tar.gz源码包解压到/opt目录
    
   
2.  进入到/opt/hadoop-2.7.2-src目录，通过MAVEN执行编译命令 （时间大约30分钟）
    命令：mvn package -Pdist,native -DskipTests -Dtar
    
3. 效果
    
4. 成功后的64位hadoop包在/opt/hadoop-2.7.2-src/hadoop-dist/target目录下
    

          

 上面这个就是编译的结果