编译Hadoop2.6.0-cdh-5.7.0源码以支持压缩格式
下载源码包hadoop-2.6.0-cdh5.7.0-src.tar.gz,解压后cd进入源码目录下,打开BUILDING.txt,如下图:
根据截图所示,需要准备:
- JDK1.7(必须使用1.7的版本,不然会报各种错误)。
- Maven 3.0 或以上
- Findbugs1.3.9
- Protocol2.5.0
- hadoop-2.6.0-cdh5.7.0
需要解压准备的包,并配置环境变量:vi .bash_profile
环境变量配置完毕,进入hadoop目录运行命令编译:mvn clean package -Pdist,native -DskipTests -Dtar
当编译成功会出现这个:
编译成功的jar包在:~/hadoop-2.6.0-cdh5.7.0/hadoop-dist/target 目录下:
解压缩编译成功的hadoop-2.6.0-cdh5.7.0 ,在bin目录下运行命令:./hadoop checknative
看到上图,说明编译hadoop-2.6.0-cdh5.7.0 支持五种压缩格式成功。