因为官网下载的版本部署以后,总会有一些WARN,大致的原因是下载的版本是在32机器上编译的,部署的机器是64位系统,有些本地库无法加载,虽然不影响使用,看着心烦,自己动手丰衣足食~~
- 安装一些编译必要的库或者工具
yum -y install gcc gcc-c++ kernel-devel yum -y install autoconf automake libtool yum -y install openssl-devel zlib-devel
- 打开hadoop-2.7.1-src目录下BUILDING.txt文件,安装建议的库或者工具(我没有参照这个,如果编译过程报错无法解决最好都安装下)
- 安装apache-ant-1.9.6
- 安装cmake-2.8.12.2
- 安装protobuf-2.5.0
- 安装apache-maven-3.2.1
- 下载和解压Hadoop-2.7.1源代码,进入解压目录,执行
mvn package -Pdist,native -DskipTests -Dtar
- 耐心等待很长时间,第一次编译需要下载很多jar包,如果长时间下载无反应,就直接ctrl+c取消,然后重新开始
出现以上界面表示编译完成,编译后的包在/opt/hadoop-2.7.1-src/hadoop-dist/target目录下
- 将新编译的安装包中lib/native文件夹下面的文件全部替换掉130、131、132服务器上的对应文件即可