CDH5.7.6搭建

说明：操作系统centos7

注解：centos6.8也是如图步骤

0准备：

0.0总体规划

IP地址	主机名	CPU	内存	备注
192.168.1.5	node1	2颗 x 2核	4GB	主节点
192.168.1.6	node2	2颗 x 1核	2GB
192.168.1.7	node3	2颗 x 1核	2GB
192.168.1..8	node4	2颗 x 1核	2GB

注：根据自己物理机器合理分配资源

（物理机内存8G：给物理机留1-2g，虚拟机主节点2-3g，节点2,3各自2g就可以了，最多三台，不然后面容易出问题，而且虚拟机内存小于1G，容易死机，在配置大数据环境，在云上测试过，需要扩展swap

物理机内存16G甚至更高：随意分配，但是主机尽量合理

eg. 8g      node1:2.5g    node2:2g    node3:2g

eg.16g     如上）

0.1相关文件下载

类型	安装包	下载地址
CM	cloudera-manager-centos7-cm5.7.6_x86_64.tar.gz	http://archive.cloudera.com/cm5/cm/5/
CDH	3个安装包： CDH-5.7.6-1.cdh5.7.6.p0.6-el7.parcel.sha1 CDH-5.7.6-1.cdh5.7.6.p0.6-el7.parcel manifest.json	http://archive.cloudera.com/cdh5/parcels/
JDK	jdk-8u161-linux-x64.tar.gz	http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
mysql数据库	mysql-5.7.16-1.el7.x86_64.rpm-bundle.tar	http://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-5.7.16-1.el7.x86_64.rpm-bundle.tar
jdbc	mysql-connector-java-5.1.46.tar.gz	https://dev.mysql.com/downloads/connector/j/3.0.html

1.配置服务器

1.1  修改主机名

hostnamectl set-hostname  你自己的主机名

eg.hostnamectl set-hostname node1

1.2修改网卡

vi /etc/sysconfig/network-scripts/ifcfg-eth0

1.3添加主机映射

vim /etc/hosts

1.4关闭防火墙

a.先停止

systemctl stop firewalld.service

b.禁止防火墙

systemctl disable firewalld.service

1.5关闭selinux

 

vi /etc/selinux/config

修改文件中这个参数为：
SELINUX=disabled

1.6配置免密SSH

1.7时间配准

配置时间同步软件NTP（物理环境需要，虚拟机不需要）

1.8 安装jdk

1.9安装mysql

参考：yum安装   https://www.cnblogs.com/zsh-blogs/p/11497720.html

源码安装：

 

2安装CM

操作此文档可以实现：https://www.cnblogs.com/lijiaman/p/8733316.html

说明：在配置数据库时候容易出现问题

./scm_prepare_database.sh mysql cm -hhadoop22 -uroot -p1234 --scm-host hadoop22 scm scm scm

scm scm scm 不要动    cm表在mysql中不能有   

特殊：在操作这一步之前的授权是对root的授权

GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '1234' WITH GRANT OPTION;

flush privileges;

不然容易陷入这个错误：at com.cloudera.enterprise.dbutil.DbProvisioner.main(DbProvisioner.java:110)
--> Error 1, giving up (use --force if you wish to ignore the error)

 

参考博客完全可以实现