CDH集群部署
-
离线安装CDH-5.7.5版本
关于CDH和Cloudera Manager
CDH (Cloudera's Distribution, including Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,并集成了很多补丁,可直接用于生产环境。
Cloudera Manager则是为了便于在集群中进行Hadoop等大数据处理相关的服务安装和监控管理的组件,对集群中主机、Hadoop、Hive、Spark等服务的安装配置管理做了极大简化。
系统环境
实验环境:戴尔R730服务器
操作系统:centos6.5-6.8
内存:8G
硬盘:1T
部署情况:
部署IP |
主机名 |
上传位置 |
安装位置 |
操作系统 |
规模大小 |
192.168.0.108 |
cdh-master |
/opt/cdh |
/opt/ |
Centos6.5 |
8核16G |
192.168.0.107 |
slave-01 |
/opt/cdh |
/opt/ |
Centos6.5 |
4核8G |
1.1、网络配置(所有节点)
Master操作修改主机名:
vim /etc/sysconfig/network
NETWORKING=yes
HOSTNAME= cdh-master
Vim /etc/hosts
192.168.0.108 cdh-master
192.168.0.107 slave-01
slave操作修改主机名:
vim /etc/sysconfig/network
NETWORKING=yes
HOSTNAME= s