CC00064.hadoop——|Hadoop&MapReduce.V35|——|Hadoop.v35||Hadoop二次开发环境|搭建示例|

一、Hadoop二次开发环境搭建

### --- 系统环境

~~~     系统：linux122： CentOS-7_x86_64
protobuf: protoc-2.5.0
maven： maven-3.6.0
hadoop: hadoop-2.9.2
java： jdk1.8.0_231
cmake: cmake-2.8.12.2
OpenSSL: OpenSSL 1.0.2k-fips
findbugs： findbugs-1.3.9

### --- 准备工作

~~~     # 安装编译需要的依赖库
~~~     # linux122主机执行
[root@linux122 ~]# yum install -y lzo-devel zlib-devel autoconf automake libtool cmake openssldevel cmake gcc gcc-c++

二、安装Maven

### --- 上传maven二进制包并解压安装

~~~     # 上传maven安装包、解压缩
[root@linux122 software]# tar -zxvf apache-maven-3.6.3-bin.tar.gz -C /usr/local/

### --- 配置系统环境变量

~~~     # 配置到系统环境变量
[root@linux122 software]# vim /etc/profile
# MAVEN_HOME
export MAVEN_HOME=/usr/local/apache-maven-3.6.3
export PATH=$PATH:$MAVEN_HOME/bin
~~~     # 刷新配置文件
[root@linux122 software]# source /etc/profile

### --- 验证maven是否安装成功

[root@linux122 software]# mvn -version
Apache Maven 3.6.3 (cecedd343002696d0abb50b32b541b8a6ba2883f)
Maven home: /usr/local/apache-maven-3.6.3
Java version: 1.8.0_231, vendor: Oracle Corporation, runtime: /opt/yanqi/servers/jdk1.8.0_231/jre
Default locale: en_US, platform encoding: UTF-8
OS name: "linux", version: "3.10.0-957.el7.x86_64", arch: "amd64", family: "unix"

三、安装protobuf：序列化的框架机制

### --- 安装依赖环境

[root@linux122 ~]# yum groupinstall Development tools -y

### --- 下载安装包

~~~     # 下载
[root@linux122 software]# wget https://github.com/protocolbuffers/protobuf/releases/download/v2.5.0/protobuf-2.5.0.tar.gz
~~~     #上传protobuf安装包
~~~     # 解压缩
[root@linux122 software]# tar -zxvf protobuf-2.5.0.tar.gz

### --- 编译安装

~~~     # 进入解压目录 配置安装路径(--prefix=/usr/local/protobuf-2.5.0)
[root@linux122 software]# cd protobuf-2.5.0
[root@linux122 protobuf-2.5.0]# ./configure --prefix=/usr/local/protobuf-2.5.0
~~~     # 编译
[root@linux122 protobuf-2.5.0]# make
~~~     # 验证编译文件
[root@linux122 protobuf-2.5.0]# make check
~~~     # 安装
[root@linux122 protobuf-2.5.0]# make install

### --- 配置环境变量

~~~     # 配置protobuf环境变量
[root@linux122 ~]# vim /etc/profile
##PROTOBUF_HOME
export PROTOCBUF_HOME=/usr/local/protobuf-2.5.0
export PATH=$PATH:$PROTOCBUF_HOME/bin
~~~     # 刷新配置文件
[root@linux122 ~]# source /etc/profile
~~~     # 验证是否安装成功
[root@linux122 ~]# protoc --version
libprotoc 2.5.0

四、安装Findbugs

### --- 下载软件包

~~~     # 下载
~~~     # 上传安装包
$ https://jaist.dl.sourceforge.net/