cdh hadoop 集群搭建

CDH5 Hadoop集群完全离线安装说明

安装准备工具：

1. 操作系统centos7

2. Jdk环境：jdk包

3. Jdbc连接包：jdbc连接包mysql-connector-java-5.1.39-bin.jar

下载地址:http://dev.mysql.com/downloads/connector/j/

4. cdh 安装相关包

（1）cloudera manager包 下载地址：

http://archive.cloudera.com/cm5/cm/5/cloudera-manager-centos7-cm5.7.2_x86_64.tar.gz

（2）CDH-5.7.2-1.cdh5.7.2.p0.11-el7.parcel

（3）CDH-5.7.2-1.cdh5.7.2.p0.11-el7.parcel.sha1

（4）manifest.json

（2）~（4）的文件下载路径：http://archive.cloudera.com/cdh5/parcels/5.7.2/

5.linux系统的mysql数据库

以上准备工具如图所示：

安装前准备工作介绍；

1. Linux版本 必须支持cloudera manager（其中python版本必须一直，否则后期出现问题特别难解决）

2. Linux系统安装之后卸载虚拟网卡：ifconfig

会提示网络问题，提示网络速度问题。如果linux系统自带virbr0,需要卸载虚拟网络。命令如何：yum -y remove libvirt*   然后 reboot重启。

3

开始安装：

1. 安装jdk（每台机器都要） ，首先卸载原有的openJDK：具体操作指令如下

卸载自带jd k:]

杀进成

rm -f /var/run/yum.pid

[root@cdh1~]$ java -version

[root@cdh1~]$ rpm -qa | grep jdk

java-1.7.0-openjdk-1.7.0.75-2.5.4.2.el7_0.x86_64

java-1.7.0-openjdk-headless-1.7.0.75-2.5.4.2.el7_0.x86_64

[root@cdh1~]# yum -y remove java-1.7.0-openjdk-1.7.0.75-2.5.4.2.el7_0.x86_64

[root@cdh1~]# yum -y remove java-1.7.0-openjdk-headless-1.7.0.75-2.5.4.2.el7_0.x86_64

[root@cdh1~]# java -version

bash: /usr/bin/java: No such file or directory

安装jdk:

方法一：使用rpm命令安装：

[root@one-centos 下载] # rpm -ivh jdk-8u111-linux-x64.rpm

设置环境变量：