CDH6.0 在Centos7.5上安装配置(版本1，有缺陷，在实验中)

最新推荐文章于 2023-05-14 14:14:32 发布

With__Sunshine

最新推荐文章于 2023-05-14 14:14:32 发布

阅读量353

点赞数

分类专栏： CDH

本文链接：https://blog.csdn.net/With__Sunshine/article/details/92802712

版权

CDH 专栏收录该内容

24 篇文章 0 订阅

订阅专栏

1.网络配置

配置过程参看：https://blog.csdn.net/With__Sunshine/article/details/90553227
vim /etc/sysconfig/network
vim /etc/hosts

2.SSH免密登录

安装过程参看：https://blog.csdn.net/With__Sunshine/article/details/91358812
ssh-keygen -t rsa -P ‘’ -f ~/.ssh/id_rsa
ssh-copy-id hostname@IP地址

3.关闭防火墙

systemctl stop firewalld.service
systemctl disable firewalld.service

4.SELINUX关闭

setenfore 0
vim /etc/selinux/config (SELINUX=disabled)

5.安装JDK配置环境变量

安装过程参看：https://blog.csdn.net/With__Sunshine/article/details/88374674
export JAVA_HOME=/usr/java/jdkXXX
export PATH=$JAVA_HOME/bin:$PATH
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

6.安装NTP

安装过程参看:https://blog.csdn.net/With__Sunshine/article/details/94037757
设置开机启动:
chkconfig ntpd on

7.安装配置mysql

安装过程参看:https://blog.csdn.net/With__Sunshine/article/details/94304116
GRANT ALL PRIVILEGES ON . TO ‘root’@’%’ IDENTIFIED BY ‘12345678’ WITH GRANT OPTION;
flush privileges

8.下载第三方依赖包

chkconfig、python、bind-utils、psmisc、libxslt、zlib、sqlite、cyrus-sasl-plain、
cyrus-sasl-gssapi、fuse、fuse-libs、redhat-lsb

yum install chkconfig python bind-utils psmisc libxslt zlib sqlite cyrus-sasl-plain cyrus-sasl-gssapi fuse fuse-libs redhat-lsb –y

ClouderaManager安装

1、安装Cloudera Manager Server、Agent

mkdir /opt/cloudera-manager
tar xvzf cloudera-manager*.tar.gz -C /opt/cloudera-manager

2、创建用户cloudera-scm

useradd --system --no-create-home --shell=/bin/false --comment “Cloudera SCM User” cloudera-scm

3、配置CM Agent

修改文件/opt/cloudera-manager/cm-5.4.3/etc/cloudera-scm-agent/config.ini中server_host

4、配置CM Server数据库

拷贝mysql jar文件到目录 /usr/share/java/
注意jar包名称要修改为mysql-connector-java.jar

grant all on . to ‘temp’@’%’ identified by ‘temp’ with grant option;
cd /opt/cloudera-manager/cm-5.4.3/share/cmf/schema/
./scm_prepare_database.sh mysql temp -h node1 -utemp -ptemp --scm-host node1 scm scm scm
格式：数据库类型、数据库、数据库服务器、用户名、密码、cm server服务器

5、创建Parcel目录

Server节点
mkdir -p /opt/cloudera/parcel-repo
chown cloudera-scm:cloudera-scm /opt/cloudera/parcel-repo
Agent节点
mkdir -p /opt/cloudera/parcels
chown cloudera-scm:cloudera-scm /opt/cloudera/parcelsa

6、制作CDH本地源

下载好文件CDH-5.4.0-1.cdh5.4.0.p0.27-el6.parcel以及manifest.json，将这两个文件放到server节点的/opt/cloudera/parcel-repo下。
打开manifest.json文件，里面是json格式的配置，找到与下载版本相对应的hash码，新建文件，文件名与你的parel包名一致，并加上.sha后缀，将hash码复制到文件中保存。