CDH平台搭建

本文详细介绍了如何搭建CDH集群,包括下载CDH RPM包,设置IP地址、hosts文件和关闭防火墙,配置SSH,安装MySQL,卸载CentOS自带的JDK,执行cloudera-manager-installer.bin进行安装,并完成Cloudera Manager服务配置。
摘要由CSDN通过智能技术生成

1 下载CDH各种RPM包

1.1 下载cloudera-manager-installer.bin

  • 这个地址可以选择最新的CM的安装文件进行下载,此处,我选择的是5.9.0版本

http://archive.cloudera.com/cm5/installer/latest/cloudera-manager-installer.bin

http://archive.cloudera.com/cm5/installer/5.9.0/cloudera-manager-installer.bin(我选择下载的版本) 
这里写图片描述

1.2 下载对应平台/架构的RPMS

对应我的平台的RPMS包下载地址如下:

http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5.9.0/RPMS/x86_64/ 
这里写图片描述

2 设置IP地址(所有节点)

2.1 设置IP地址和网关

Master :IP 192.168.1.100    网关 192.168.1.254
Worker1:IP 192.168.1.101    网关 192.168.1.254
Worker2:IP 192.168.1.102    网关 192.168.1.254
Worker3:IP 192.168.1.103    网关 192.168.1.254
Worker4:IP 192.168.1.104    网关 192.168.1.254
  
  
  
  • 1
  • 2
  • 3
  • 4
  • 5
  • 1
  • 2
  • 3
  • 4
  • 5

2.2 设置主机名

修改系统的网络配置文件

vim /etc/sysconfig/network
  
  
  
  • 1
  • 1

例如:修改HOSTNAME=Master 
这里写图片描述 
各个节点的主机名配置如下

192.168.1.100 主机名: Master
192.168.1.101 主机名: Worker1
192.168.1.102 主机名: Worker2
192.168.1.103 主机名: Worker3
192.168.1.104 主机名: Worker4
  
  
  
  • 1
  • 2
  • 3
  • 4
  • 5
  • 1
  • 2
  • 3
  • 4
  • 5

(注:此处集群的各个节点的主机名字就是用安装系统时的设置的主机名,所以我就不用修改了)

3 设置hosts文件(所有节点)

绑定IP地址与HostName

vim /etc/hosts
  
  
  
  • 1
  • 1
192.168.1.100   Master
192.168.1.101   Worker1
192.168.1.102   Worker2
192.168.1.103   Worker3
192.168.1.104   Worker4
  
  
  
  • 1
  • 2
  • 3
  • 4
  • 5
  • 1
  • 2
  • 3
  • 4
  • 5

这里写图片描述

4 关闭防火墙(所有节点)

4.1 检查防火墙状态

service iptables status
  
  
  
  • 1
  • 1

4.2关闭防火墙

chkconfig iptables off        //永远关闭-重启后生效
  
  
  
  • 1
  • 1
service iptables off      //临时关闭-不用重启
  
  
  
  • 1
  • 1

系统重启后,查看防火墙状态如下 
这里写图片描述

5 关闭SELinux(所有节点)

使用getenforce查看是否关闭: 
这里写图片描述 
显示的是在强制执行,接下来我们需要关掉它 
修改/etc/selinux/config 文件,将SELINUX=enforcing改为SELINUX=disabled,修改完成后重启机器生效。 
这里写图片描述 
(将SELINUX=enforcing改为disabled) 
这里写图片描述

reboot -h now
  
  
  
  • 1
  • 1

重启之后,查看是否生效 
这里写图片描述 
已经生效,注意每个节点都要关闭SElinux哟

6 配置SSH(可选)

6.1 修改sshd配置文件

vim /etc/ssh/sshd_config
  
  
  
  • 1
  • 1

这里写图片描述 
去掉注释,放开这几个配置项 
这里写图片描述 
重启sshd服务

service sshd restart
  
  
  
  • 1
  • 1

这里写图片描述

6.2 生成私钥和公钥(所有节点)

ssh-keygen -t rsa
  
  
  
  • 1
  • 1

Master: 
这里写图片描述
Worker1: 
这里写图片描述
Worker2: 
这里写图片描述
Worker3: 
这里写图片描述
Worker4: 
这里写图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值