Hadoop SRC重新编译

下载hadoop 2.2 SRC包到Linux平台，安装其BUILDING.TXT文档说明要求进行编译，具体步骤如下：

1、JDK 1.6 +
   export JAVA_HOME=/usr/java/jdk1.6.0_31

2、Maven 3.0 or later
  下载mvn包，解压到$HOME/mvn目录下
   $ mvn -version
      Apache Maven 3.1.1
   export M2_HOME=/home/storm/maven

3、Findbugs 1.3.9 (if running findbugs)

4、ProtocolBuffer 2.4.1+ (for MapReduce and HDFS)
 参考http://www.ibm.com/developerworks/cn/linux/l-cn-gpb/介绍
下载地址：http://code.google.com/p/protobuf/downloads/list
安装：cd /home/storm/protobuf-2.5.0
          ./configure
          ./make
          ./make check
          ./make install

5、CMake 2.6 or newer (if compiling native code)
   下载http://www.cmake.org/cmake/resources/software.html
    cd /home/storm/cmake-2.8.12.1
    ./bootstrap
    make
    make install

HADOOP MVN的主要模块：
  hadoop (主要hadoop项目
     - hadoop-project  :  所有mvn模块的父POM，所有plugins和依赖都定义在这里
     - hadoop-project-dist (parent POM生成的distributions)
     - hadoop-annotations (生成hadoop doclet用于生成javadoc)
     - hadoop-assemblies (被不同的模块使用的MAVEN assenblies)
     - hadoop-common-project (Hadoop Common)
     - hadoop-hdfs-project (Hadoop HDFS)
     - hadoop-mapreduce-project (Hadoop Mapreduce)
     - hadoop-tools (Hadoop tools 如streaming Discp等）
     - hadoop-dist (Hadoop distribution assembler)

编译：
  MAVEN_OPTS="-Xms256m -Xmx512m"
  mvn package

   

         
   

来自 “ ITPUB博客 ” ，链接：http://blog.itpub.net/354732/viewspace-1076764/，如需转载，请注明出处，否则将追究法律责任。

转载于:http://blog.itpub.net/354732/viewspace-1076764/