搭建CDH5.13.1步骤及问题解决

最新推荐文章于 2022-04-27 20:03:48 发布

爱码师

最新推荐文章于 2022-04-27 20:03:48 发布

阅读量541

点赞数

分类专栏： Cloudera 文章标签： CDH5.13.1搭建 CDH5.13.1搭建步骤 cloudera5 大数据环境搭建 CDH

本文链接：https://blog.csdn.net/zxz306418932/article/details/96277397

版权

本文详细介绍了如何搭建CDH5.13.1，包括资源准备、配置环境、安装JDK、MySQL、设置SSH免密、禁用IPv6和防火墙、时间同步、用户限制设置、安装MySQL并配置远程访问、创建数据库，以及解决安装过程中的常见问题。提供了一站式的CDH5.13.1搭建指南。

摘要由CSDN通过智能技术生成

资源准备：

cloudera manager安装包和配置文件:
1. cloudera-manager-centos7-cm5.13.1_x86_64.tar.gz
  
  下载地址：http://archive.cloudera.com/cm5/cm/5/cloudera-manager-centos7-cm5.13.1_x86_64.tar.gz
2. CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel
  
  下载地址：http://archive.cloudera.com/cdh5/parcels/5.13.1/CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel
3. CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha1
  
  下载地址：http://archive.cloudera.com/cdh5/parcels/5.13.1/CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha1
4. manifest.json
  
  下载地址：http://archive.cloudera.com/cdh5/parcels/5.13.1/manifest.json
JDK:
1. jdk-8u202-linux-x64.tar.gz
  
  下载地址：https://www.oracle.com/technetwork/java/javase/downloads/java-archive-javase8-2177648.html
mysql:
1. mysql-5.7.18-1.el7.x86_64.rpm-bundle.tar
  
  下载地址：http://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-5.7.18-1.el7.x86_64.rpm-bundle.tar
2. mysql-connector-java-5.1.46.jar
  
  下载地址：https://dev.mysql.com/get/Downloads/Connector-J/mysql-connector-java-5.1.46.zip

配置jdk：（此处省略jdk安装步骤）
vi /etc/profile
export JAVA_HOME=/opt/apps/java/jdk1.8.0_181
export PATH=$JAVA_HOME/bin:$PATH
分发到每台机器上
scp -r /etc/profile root@logoshadoop2:/etc/profile
配置hosts 和 hostname：
vi /etc/hosts
将主机名和ip映射配置到hosts文件中：
10.2.9.11 logoshadoop1
10.2.9.5 logoshadoop2
10.2.9.7 logoshadoop3
10.2.9.8 logoshadoop4
10.2.9.9 logoshadoop5
10.2.9.10 logoshadoop6
分发到每台机器上

编辑/etc/sysconfig/network配置：
NETWORKING=yes
HOSTNAME=logoshadoop1
NETWORKING_IPV6=no
PEERNTP=no
分发到每台机器上

设置ssh免密登陆：
ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa