基于Centos7.2的CDH5.7.2的部署

1 本次是基于centos7.2的CDH5.7.2的部署，希望能给大家做个参考

2 前置说明

2.1 服务器的配置说明
       系统：建议使用centos7.x

2.2 CDH架构平台

 

2.3 本次搭建软件和角色说明

使用了3台服务器

系统使用的是：centos7.2
JDK使用的：jdk-7u79-linux-x64.tar.gz
CDH：  cloudera-manager-centos7-cm5.7.2_x86_64.tar.gz
       CDH-5.7.2-1.cdh5.7.2.p0.18-el7.parcel
       CDH-5.7.2-1.cdh5.7.2.p0.18-el7.parcel.sha
       manifest.json
依赖包：mysql-connector-java-5.1.31-bin.jar

所扮演的角色如下：

                   Server              Agent
hadoop01             1                   1
hadoop02                                 1
hadoop03                                 1

3 CDH的部署

3.1 基础环境准备

3.1.1 主机名映射(全部节点)

vi /etc/hosts 如下：
192.168.5.221 hadoop01
192.168.5.222 hadoop02
192.168.5.230 hadoop03

验证：

3.1.2 关闭防火墙(全部节点)

iptables -X
iptables -F
iptables -Z

systemctl stop firewalld.service
systemctl disable firewalld.service
firewall-cmd --state

vi /etc/selinux/config
改：SELINUX=permissive 如下

reboot

3.1.3 yum的安装

 

注：每个基于系统的部署不同yum的配置也有所不同。下面的一种只能作为参考用：
首先上传系统的镜像CentOS-7-x86_64-DVD-1511.iso 放在/home/tools

hadoop01节点的配置:

cd /etc/yum.repos.d/
rm -rf *
vi local.repo
[centos]
name=centos
baseurl=file:///opt/centos
gpgcheck=0
enabled=1

mkdir /opt/centos
mount -o loop /home/tools/CentOS-7-x86_64-DVD-1511.iso /opt/centos/
yum clean all
yum list

安装ftp服务器
yum install vsftpd –y
vi /etc/vsftpd/vsftpd.conf
后面加多一行anon_root=/opt---引导ftp到/opt目录下

systemctl restart vsftpd
chkconfig vsftpd on

其它节点的配置如下：
cd /etc/yum.repos.d/
rm -rf *

vi local.repo
[centos]
name=centos
baseurl=ftp://hadoop01/centos
gpgcheck=0
enabled=1

yum clean all
yum list

3.1.4 安装openssh-clients (全部节点)

yum install openssh-clients –y

3.1.5 ntp时间同步

所有节点：yum install ntp -y

hadoop01节点执行
vi /etc/ntp.conf
添加如下：
server 127.127.1.0
fudge 127.127.1.0 stratum 10