CDH6.0 在Centos7.5上安装配置(版本2)

0.0CDH集群规模的增加，磁盘空间记录

前提，集群规模四台,s201,s202,s203,s204

0.1虚拟机配置

总结：磁盘大小设置在20G的时候，可能会出现磁盘空间不足的情况，为防不测，磁盘空间设置30G以上，我的直接设置40G

0.2卸载openjdk,mysql,mariadb

rpm -qa | grep jdk
rpm -qa | grep mysql
rpm -qa | grep mariadb

rpm -e --nodeps xxx

1.网络配置

配置过程参看：https://blog.csdn.net/With__Sunshine/article/details/90553227

2.关闭防火墙

systemctl stop firewalld.service
systemctl disable firewalld.service

3.SELINUX关闭

setenfore 0
vim /etc/selinux/config (SELINUX=disabled)

4.SSH免密登录

安装过程参看：https://blog.csdn.net/With__Sunshine/article/details/91358812

5.安装NTP

安装过程参看:https://blog.csdn.net/With__Sunshine/article/details/94037757

6.安装配置mysql

安装过程参看:https://blog.csdn.net/With__Sunshine/article/details/94304116

7.下载第三方依赖包

yum install chkconfig python bind-utils psmisc libxslt zlib sqlite cyrus-sasl-plain cyrus-sasl-gssapi fuse fuse-libs redhat-lsb –y

8.Cloudera Manager安装

安装过程：https://blog.csdn.net/With__Sunshine/article/details/94340495

9CDH 6 安装

安装过程:https://blog.csdn.net/With__Sunshine/article/details/94345439

10集群重启

遇到的奇怪现象：4台主机,s201,s202,s203,s204,内存/磁盘空间设置,2G/40G,2G/40G,2G/40G
首次配置成功，登陆，192.168.242.201:7180/cmf/login，当s201内存不足以后，再次登陆，登陆失败，
ps -ef | grep 7180,看不到端口在使用，
systemctl status cloudera-scm-server 显示 Active: active (running)
重启systemctl restart cloudera-scm-server,任然不能登陆，
猜测是主服务器s201内存设置过小的原因，
关闭所有集群后，设置s201的内存为4G

启动所有集群:
查看，mysql,httpd,ntpd,cloudera-scm-server都处于Active: active (running)后
cloudera-scm-server服务重启后，需要等1分钟左右，然后在mac上打开浏览器登陆，192.168.242.201:7180/cmf/login，成功打开管理界面
其他情况：集群意外挂掉，可以尝试先清理/tmp下的所有文件，然后再重启服务：mysql,httpd,ntpd,cloudera-scm-server，1分钟后尝试192.168.242.201:7180/cmf/login

11.CDH 6系列（CDH 6.0.0、CDH 6.1.0、CDH 6.2.0等）安装和使用，待学习与补充

https://blog.csdn.net/zimiao552147572/article/details/87190368

12.在CDH上离线安装Spark2.3

参考:https://blog.csdn.net/lichangzai/article/details/82225494

13.CDH添加oozie

14.添加oozie后，添加hue服务

14.CDH的 Phoenix、hbase操作

参考https://blog.csdn.net/zimiao552147572/article/details/87286352