cdh搭建hadoop集群

本文接cdh平台离线搭建（一）、（二）：https://blog.csdn.net/weixin_42814075/article/details/97392216
https://blog.csdn.net/weixin_42814075/article/details/97623782

登录管理页面

http://<主机名>:7180，默认用户名登录密码都是admin，我这里是主机名是cm-server，下文也是基于这个主机名

点“√”同意后，“继续”

选择安装的版本，学习用的话就免费版

直接“继续”
输入所有主机名

点击图中的“搜索”按钮

选择CDH版本

Parcel路径选择：http://cm-sever/cdh_repo/，这里只是举个例子，具体看Parcel路径的存放位置

自定义存储库：http://cm.cdh.com/cdh_repo/cm/5/

是否需要安装JDK，默认不进行安装，直接下一步

是否启用单用户模式，可以自由选择

提供 SSH 登录凭据，可以自由选择，这里直接使用root用户

进行集群安装，如果安装失败可以点击详细信息查看失败原因，解决后再重新安装

报错could not contact scm server at localhost:7182, giving up
waiting for rollback request
解决方法：sudo mv /usr/bin/host /usr/bin/host.bak 在报错的机器上都执行

安装选定Parcel，先前配置的Parcel就作用于此处，如果不进行此配置会去官网进行下载，对网络要求很高，并网络中断后会重新下载，较麻烦，使用此配置可以直接下载成功，并速度很快：

这里检查可能会报错，以下是一些报错的解决

如果一直卡在这里不动，那么就要去看看后不是有报错
去slave1.cdh.com机器看日志，日志所在目录：/var/log/cloudera-scm-agent

解决方法：删除agent目录下面的cm_guid文件，并重启失败节点的agent服务恢复。
cm-guid文件的位置是/var/lib/cloudera-scm-agent/cm_guid

cd /var/lib/cloudera-scm-agent/
rm -rf cm_guid
service cloudera-scm-agent restart

到这里对集群机器的添加就完成了

检查机器环境失败

重新打开一个浏览器的tab页http://cm-server:7180/

会自动跳到http://cm-server:7180/cmf/clusters/2/status

点击左侧“3主机”

随便再点一台机器进去看

将/opt/jdk1.8.0_201填入保存，每台机器都需要操作,然后重新验证

添加服务

安装组件服务，根据自己需要

组件信息一般都自动分配好了

后边的配置根据自己需要做更改，一路继续直到安装完成。

最后组件安装目录默认在
/opt/cloudera/parcels/CDH-5.16.1-1.cdh5.16.1.p0.3/lib/