本文介绍了如何重新编译Apache Hadoop源码以包含C程序访问接口。针对Hadoop-2.7.5版本，文章详细阐述了在Centos6.9 64位环境下，从准备Linux系统、安装JDK1.7、配置Maven、安装Findbugs、解决依赖到编译protobuf、snappy以及最终编译Hadoop源码的全过程。通过编译，Hadoop支持了包括bzip2和snappy在内的多种压缩算法。
1为什么要编译hadoop
由于appache给出的hadoop的安装包没有提供带C程序访问的接口，所以我们在使用本地库（本地库可以用来做压缩，以及支持C程序等等）的时候就会出问题,需要对Hadoop源码包进行重新编译.
2编译环境的准备
2.1：准备linux环境
准备一台linux环境，内存4G或以上，硬盘40G或以上，我这里使用的是Centos6.9 64位的操作系统（注意：一定要使用64位的操作系统）
2.2：虚拟机联网，关闭防火墙，关闭selinux
关闭防火墙命令：
service iptables stop
chkconfig iptables off
关闭selinux
vim /etc/selinux/config
2.3：安装jdk1.7
注意hadoop-2.7.5 这个版本的编译，只能使用jdk1.7，如果使用jdk1.8那么就会报错
查看centos6.9自带的openjdk
rpm -qa | grep java
最低0.47元/天 解锁文章
1610
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
