Cloudera Manager 5.14.X 安装部署（中）

最新推荐文章于 2022-08-16 11:42:15 发布
最新推荐文章于 2022-08-16 11:42:15 发布
阅读量469 收藏
点赞数
分类专栏： 大数据 文章标签： cloudera hadoop spark
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lubin2016/article/details/108406898
版权

安装Server和Agent

方式一（path A installer-采用嵌入式PostgreSQL数据库）

前置条件：（CM集群每个节点都要实现）

​ 1）修改系统文件句柄数；

​ 2）修改swap交换区空间；

​ 3）禁用hugepage透明大页；

​ 4）关闭防火墙和selinux；

​ 5）修改主机名和映射文件；

​ 6）实现免秘钥登录；

​ 7）搭建共享源；

​ 8）配置好ntp时间同步服务；

​ 9）安装JDK；

1. 安装CM Agent（所有Agent节点）

方法一（推荐）

安装Agent客户端

yum install cloudera-manager-agent

修改Agent的配置文件

vim /etc/cloudera-scm-agent/config.ini，修改内容如下：

server_host=server节点主机名称或IP

启动cloudera-manager-agent

/etc/init.d/cloudera-scm-agent start

方法二

先安装好Cloudera Manager Server，然后再CM的WEB引导界面安装Agent

注意： 以上两种方式任选其一，推荐方式一

2. 安装Cloudera Manager Server

下载安装脚本到指定目录

下载地址：http://archive.cloudera.com/cm5/installer/5.15.0/

添加可执行权限

chmod u+x cloudera-manager-installer.bin

执行安装

./cloudera-manager-installer.bin --skip_repo_package=1

然后在弹出的界面，一直选择next，yes，ok即可。

注意： 如果Cloudera Manager Server上没有手动安装rpm包此时就会联网下载，下载速度一般都较慢，太费时间。

检验是否安装成功

通过查看7180端口号，是否启动，来验证Cloudera Manager Server是否安装成功

netstat -anp|grep 7180

注意： 如果没有netstat命令，则安装netstat服务

yum -y install net-tools

登录到http://clouderaManagerServer:7180/cmf/login界面，初始用户名和密码都是admin

注意： clouderaManagerServer为Cloudera Manager Server的ip地址

方式二（path B package-采用外置数据库）

前置条件：（CM集群每个节点都要实现）

​ 1）修改系统文件句柄数；

​ 2）修改swap交换区空间；

​ 3）禁用hugepage透明大页；

​ 4）关闭防火墙和selinux；

​ 5）修改主机名和映射文件；

​ 6）实现免秘钥登录；

​ 7）搭建共享源；

​ 8）配置好ntp时间同步服务；

​ 9）安装JDK；

1. 安装mysql（server节点或者单独数据库服务器）

1）查看系统是否已经安装mysql和mariadb，如果已经安装，卸载

################## rpm方式安装
# 查看系统是否安装了mysql和mariadb
rpm -qa | grep -i mysql
rpm -qa | grep -i mariadb

# 卸载相应的软件包
rpm -e 软件包名称

################## yum方式安装
# 查看系统是否安装了mysql和mariadb
yum list installed | grep mysql
yum list installed | grep mariadb

# 卸载相应的软件包
yum remove 软件包名称

注意： 推荐采用yum方式安装与卸载rpm包，yum能够自动处理依赖

2）卸载组件后，删除原有配置（如果存在）

rm -rf /var/lib/mysql
rm -rf /var/log/mysqld.log

注意： yum方式卸载后，不会自动删除/var/lib/mysql目录和/var/log/mysqld.log文件，需要手动删除

3）解压mysql软件包到指定位置

tar -xvf mysql-5.7.16-1.el7.x86_64.rpm-bundle.tar

4）安装mysql组件

rpm -ivh mysql-community-common-5.7.16-1.el7.x86_64.rpm
rpm -ivh mysql-community-libs-5.7.16-1.el7.x86_64.rpm
rpm -ivh mysql-community-client-5.7.16-1.el7.x86_64.rpm
rpm -ivh mysql-community-server-5.7.16-1.el7.x86_64.rpm
rpm -ivh mysql-community-libs-compat-5.7.16-1.el7.x86_64.rpm

5）移动旧的InnoDB日志文件到备份文件夹（卸载的时候，已经手动删除/var/lib/mysql目录，重新安装后该目录为空，可以无需进行此步骤）

mkdir /var/lib/mysql-backup
mv /var/lib/mysql/ib_logfile0 /var/lib/mysql-backup/ib_logfile0
mv /var/lib/mysql/ib_logfile1 /var/lib/mysql-backup/ib_logfile1

6）先备份mysql配置文件/etc/my.cnf，然后修改mysql配置(cloudera 推荐)

[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
transaction-isolation = READ-COMMITTED
# Disabling symbolic-links is recommended to prevent assorted security risks;
# to do so, uncomment this line:
symbolic-links = 0

key_buffer_size = 32M
max_allowed_packet = 32M
thread_stack = 256K
thread_cache_size = 64
query_cache_limit = 8M
query_cache_size = 64M
query_cache_type = 1

max_connections = 550
#expire_logs_days = 10
#max_binlog_size = 100M

#log_bin should be on a disk with enough free space.
#Replace '/var/lib/mysql/mysql_binary_log' with an appropriate path for your
#system and chown the specified folder to the mysql user.
log_bin=/var/lib/mysql/mysql_binary_log

#In later versions of MySQL, if you enable the binary log and do not set
#a server_id, MySQL will not start. The server_id must be unique within
#the replicating group.
server_id=1

binlog_format = mixed

read_buffer_size = 2M
read_rnd_buffer_size = 16M
sort_buffer_size = 8M
join_buffer_size = 8M

# InnoDB settings
innodb_file_per_table = 1
innodb_flush_log_at_trx_commit  = 2
innodb_log_buffer_size = 64M
innodb_buffer_pool_size = 4G
innodb_thread_concurrency = 8
innodb_flush_method = O_DIRECT
innodb_log_file_size = 512M

注意： 如果配置为MyISAM引擎时，Cloudera Manager将不会启动，在InnoDB配置出现错误时，表引擎会转换为MyISAM，所以需要正确配置InnoDB，检查表使用的引擎类型，使用命令show table status

7）启动mysql

systemctl start mysqld.service

8）设置开机自启动

systemctl enable mysqld.service

9）查看初始密码

grep "password" /var/log/mysqld.log

10）登录数据库设置root用户密码

# mysql5.7默认密码规则不允许设置过于简单的密码，如果要设置，先修改密码规则和密码长度，再设置新密码
set global validate_password_policy=0;
set global validate_password_length=11;
alter user 'root'@'localhost' identified by 'root@123456';

11）创建数据库并授权

# Cloudera Manager Server数据库
CREATE DATABASE scm DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
GRANT ALL ON scm.* TO 'scm'@'%' IDENTIFIED BY 'root@123456';

# Activity Monitor数据库
CREATE DATABASE amon DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
GRANT ALL ON amon.* TO 'amon'@'%' IDENTIFIED BY 'root@123456';

# Reports Manager数据库
CREATE DATABASE rman DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
GRANT ALL ON rman.* TO 'rman'@'%' IDENTIFIED BY 'root@123456';

# Hue数据库
CREATE DATABASE hue DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
GRANT ALL ON hue.* TO 'hue'@'%' IDENTIFIED BY 'root@123456';

# Hive MetaStore Server数据库
CREATE DATABASE metastore DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
GRANT ALL ON metastore.* TO 'hive'@'%' IDENTIFIED BY 'root@123456';

# Sentry Server数据库
CREATE DATABASE sentry DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
GRANT ALL ON sentry.* TO 'sentry'@'%' IDENTIFIED BY 'root@123456';

# Cloudera Navigator Audit Server
CREATE DATABASE nav DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
GRANT ALL ON nav.* TO 'nav'@'%' IDENTIFIED BY 'root@123456';

# Cloudera Navigator Metadata Server 数据库
CREATE DATABASE navms DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
GRANT ALL ON navms.* TO 'navms'@'%' IDENTIFIED BY 'root@123456';

# Oozie数据库
CREATE DATABASE oozie DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
GRANT ALL ON oozie.* TO 'oozie'@'%' IDENTIFIED BY 'root@123456';

flush privileges;

查看创建的数据库

show databases;

确认用户的权限

SHOW GRANTS FOR '<user>'@'%';

注意： 创建数据库时指定数据库编码utf8； GRANT ALL ON <database>.* TO '<user>'@'%' IDENTIFIED BY '<password>';

12）拷贝mysql的数据库驱动到/usr/share/java目录下，并重命名

mv mysql-connector-java-5.1.46/mysql-connector-java-5.1.46.jar /usr/share/java/mysql-connector-java.jar

注意： 在Cloudera Manager服务器和其它服务器（比如：Activity Monitor、Reports Manager、Hive Metastore、Sentry角色、Cloudera Navigator Audit 角色）上安装JDBC connector；

Cloudera 建议需要使用数据库角色分配到同一个服务器上，然后在该服务器上安装JDBC connector，这只是建议，不是必须，当然你也可以将角色，例如：Activity Monitor安装到其它单独的服务器上，然后在这些需要使用数据库的角色所在服务器上安装JDBC connector

2. 安装Agent（所有Agent节点）

方法一（推荐）

1）安装客户端Agent

yum -y install cloudera-manager-agent

2）修改cloudera-manager-agent的配置文件

vim /etc/cloudera-scm-agent/config.ini

3）修改内容如下

server_host={server节点主机名或IP}

4）启动Agent

/etc/init.d/cloudera-scm-agent start

注意： server_host为内部网络和外部网络都可以，一定要保证server能检测到agent的心跳

方法二

先安装好Server，然后再CM的WEB引导界面安装Agent

注意： 以上两种方式任选其一，推荐方式一

3. 安装Server（Server节点）

1）安装Server端

yum -y install cloudera-manager-server

2）拷贝CDH的parcel包到/opt/cloudera/parcel-repo目录下

CDH-5.14.0-1.cdh5.14.0.p0.24-el7.parcel          KAFKA-2.0.2-1.2.0.2.p0.5-el7.parcel          manifest.json
CDH-5.14.0-1.cdh5.14.0.p0.24-el7.parcel.sha      KAFKA-2.0.2-1.2.0.2.p0.5-el7.parcel.sha
CDH-5.14.0-1.cdh5.14.0.p0.24-el7.parcel.torrent  KAFKA-2.0.2-1.2.0.2.p0.5-el7.parcel.torrent

注意： 将下载的CDH-5.14.0-1.cdh5.14.0.p0.24-el7.parcel.sha1的后缀.sha1文件改为.sha文件

3）初始化Cloudera Manager Server数据库命令格式

/usr/share/cmf/schema/scm_prepare_database.sh database-type [options] database-name username password

注意： database-type：数据库类型，Cloudera Manager Server支持的一种数据库，包括：MariaDB、MySQL、Oracle、PostgreSQL

database-name：Cloudera Manager Server使用的数据库名称

username：Cloudera Manager Server使用的数据库的用户名称

password：Cloudera Manager Server使用的数据库的密码

options选项如下

-?或–help：展示帮助

–config-path：Cloudera Manager Server的数据库配置文件路径，默认是：/etc/cloudera-scm-server

-f：初始化过程中，出错依然继续运行，不终止

–scm-host：Cloudera Manager Server安装的主机名称，如果Cloudera Manager Server和数据库安装在同一台主机上，则可以省略此选项

-h或–host：为MYSQL所在主机的主机名或者IP地址，默认为localhost；

-P或–port：连接数据库的端口号，默认MariaDB、MySQL端口号为3306，PostgreSQL为5432，Oracle为1521，此选项用于连接远程数据库时使用。

-u或–user：数据库管理员名称，如果提供了此选项，就会为Cloudera Manager Server新创建用户<scm-user>和数据库<scm-dbname>（之前安装MySQL时已经创建过Cloudera Manager Server的用户和密码），如果没有提供此选项会用之前创建的用户名和数据库来初始化此数据库，该选项经常在数据库和Cloudera Manager Server不在同一台机器上时使用；

-p或–password：数据库管理员密码，默认是无密码的，此选项核上面-u经常一起搭配使用；

–schema-path：Cloudera Manager Schema配置文件位置，默认为/usr/share/cmf/schema

初始化Cloudera Manager Server数据库，init_cmf.sh内容如下：

#! /bin/sh

/usr/share/cmf/schema/scm_prepare_database.sh mysql scm scm 'root@123456'

注意： scm_prepare_database.sh此脚本为安装server服务时自动生成，密码为创建数据库和用户时设定的密码；

初始化Cloudera Manager Server数据库有三种情况

######################## 情况1，数据库和Cloudera Manager Server不在同一台机器
# 在myhost1创建一个临时用户，可以连接到myhost2
> grant all on *.* to 'temp'@'%' identified by 'temp' with grant option;
# 在myhost2上，运行如下脚本
> sudo /usr/share/cmf/schema/scm_prepare_database.sh mysql -h myhost1.sf.cloudera.com -utemp -ptemp --scm-host myhost2.sf.cloudera.com scm scm scm
# 在myhost1上删除临时用户temp
> drop user 'temp'@'%';

######################## 情况2，指定Oracle为Cloudera Manager Server数据库
/usr/share/cmf/schema/scm_prepare_database.sh -h cm-oracle.example.com oracle orcl sample_user sample_pass

######################## 情况3，数据库和Cloudera Manager Server在同一台机器
本安装方法中采用这种形式，命令上面已经给出

4）移除嵌入的PostgreSQL配置文件（如果存在）

# Installer or package install
rm /etc/cloudera-scm-server/db.mgmt.properties

# Tarball install
rm <tarball root>/etc/cloudera-scm-server/db.mgmt.properties

5）启动server服务

/etc/init.d/cloudera-scm-server start

6）查看7180端口号的程序是否启动

lsof -i:7180 或者 netstat -anp|grep 7180

方式三（path C tarball install-包安装版-外置数据库）

前置条件：（CM集群每个节点都要实现）

​ 1）修改系统文件句柄数；

​ 2）修改swap交换区空间；

​ 3）禁用hugepage透明大页；

​ 4）关闭防火墙和selinux；

​ 5）修改主机名和映射文件；

​ 6）实现免秘钥登录；

​ 7）搭建共享源；

​ 8）配置好ntp时间同步服务；

​ 9）安装JDK；

1. 安装mysql（server节点或者单独数据库服务器）

方法同path B中安装mysql步骤一致；

2. 安装Server（Server节点）

1）下载地址http://archive.cloudera.com/cm5/cm/5/

2）解压cloudera-manager的tar包cloudera-manager*.tar.gz；

3）将解压后的cm-5.14.0 和cloudera目录放到/opt目录下；

4）初始化Cloudera Manager Server数据库

<tarball root>/share/cmf/schema/scm_prepare_database.sh database-type [options] database-name username password

5） 移除嵌入的PostgreSQL配置文件（如果存在）

# Installer or package install
rm /etc/cloudera-scm-server/db.mgmt.properties

# Tarball install
rm <tarball root>/etc/cloudera-scm-server/db.mgmt.properties
3. 安装Agent（所有Agent节点）

1）修改/opt/cm-5.14.0/etc/cloudera-scm-agent/config.ini中的server_host为主节点的主机名；

2）拷贝/opt/cm-5.14.0到其它Agent节点；

4. 准备parcel包

拷贝CDH的parcel包到主节点的/opt/cloudera/parcel-repo/目录中

CDH-5.14.0-1.cdh5.14.0.p0.24-el7.parcel          KAFKA-2.0.2-1.2.0.2.p0.5-el7.parcel          manifest.json
CDH-5.14.0-1.cdh5.14.0.p0.24-el7.parcel.sha      KAFKA-2.0.2-1.2.0.2.p0.5-el7.parcel.sha
CDH-5.14.0-1.cdh5.14.0.p0.24-el7.parcel.torrent  KAFKA-2.0.2-1.2.0.2.p0.5-el7.parcel.torrent

注意： 将下载的CDH-5.14.0-1.cdh5.14.0.p0.24-el7.parcel.sha1的后缀.sha1文件改为.sha文件

5. 启动Agent和Server

1）通过/opt/cm-5.14.0/etc/init.d/cloudera-scm-agent start启动Agent服务（所有Agent节点都要启动Agent服务）；

2）通过/opt/cm-5.14.0/etc/init.d/cloudera-scm-server start启动服务端；

注意： 安装Hive，或oozie的时候可能会报错，因为使用了MySQL作为hive的元数据存储，hive默认没有带mysql的驱动，令拷贝mysql驱动到Hive和Oozie的lib目录下即可

# cp /opt/cm-5.14.0/share/cmf/lib/mysql-connector-java-*.jar /opt/cloudera/parcels/CDH-5.14.0-1.cdh5.14.0.p0.24/lib/hive/lib/
     
# cp /opt/cm-5.14.0/share/cmf/lib/mysql-connector-java-*.jar /opt/cloudera/parcels/CDH-5.14.0-1.cdh5.14.0.p0.24/lib/oozie/lib/

# cp /opt/cm-5.14.0/share/cmf/lib/mysql-connector-java-*.jar /var/lib/oozie/

hue的连接会有Unexpected error. Unable to verify database connection的报错，在hue安装的机器上安装一下python-lxml，即yum install -y python-lxml即可。

3）登录web界面安装CM服务和CDH服务

http://clouderaManagerServer:7180/cmf/login
留不住斜阳
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Cloudera Enterprise 5.8.x 中文文档
10-07
Cloudera 提供一个可扩展、灵活、集成的平台，可用来方便地管理您的企业中快速增长的多种多样的数据。业界领先的 Cloudera 产品和解决方案使您能够部署并管理 Apache Hadoop 及其相关项目、操作和分析您的数据以及...
Cloudera Enterprise 5.x部署手册1
08-04
1. 集群服务器配置，包括安装操作系统、关闭防火墙、同步服务器时钟等 2. 外部数据库安装 3. 安装 Cloudera 管理器 4. 安装 CDH 集群 5.
CDH6.3.1安装
Allenzyg的博客
05-28 5500
CDH6.3.1安装遇到很多问题，我想主要是由于条件有限，毕竟自己的电脑内存不如专业集群的内存大（如果是内存和硬盘充足，有些是可以避免的，甚至不会出现报错的情况），这里就介绍一下我用VMware安装的虚机中搭建CDH集群的辛酸历程。为了避免多次、重复安装不成功，所以需要具备以下条件： 1. 内存要足够大 我的电脑内存是8G： 使用虚拟机安装 Cloudare server：4G Cloudare agent：分别为1G 电脑最后很卡，而且内存98%。 官方推荐最小内存为10G，所以最好还是听从官方的建...
cloudera manager agent 传说中cm agent的作用
zy103118的博客
10-10 2768
CM=Cloudera Manager Agent 即 cm 代理进程它是和cm server进程通信的一个对端进程，目的是让安装了cm agent进程的那台 hadoop环境主机或者是impalad主机 定期上报自己的相关hadoop组件进程或impalad进程的工作状态数据，也是cm server下发 安装hadoop生态下其他工作组件环境程序的通信对端管理进程，在每一台安装了clou...
CDH安装教程
。。。。。。
12-24 3854
CDH安装教程 本篇是刚进入公司安装CDH的记录，远程服务器3台，用Xshell6 工具连接 虚拟的环境准备 1、主机名设置（每一台服务器都设置：后面没有单独说明的每台都要进行配置）： hostnamectl set-hostname dsy0 vim /etc/sysconfig/network NETWORKING=yes HOSTNAME=dsy0 cat /etc/sysconfig/network 2、网络配置： vim /etc/hosts cat /etc/hosts 3、禁
Cloudera Manager5.15.0安装教程，每步附图，超详细
qq_26578763的博客
07-28 2079
一、系统配置 1.hostname 在所有机器进行操作 1)规划主机名 server cmserver.ifoton.com.cn agent agent1.ifoton.com.cn agent2.ifoton.com.cn 2)设置主机名 hostname cmserver.ifoton.com.cn hostnamectl set-hostname cmserver.ifoton.com.cn hostnamectl set-icon-name cmserver.ifoton.com.cn
cloudera manager安装
yang_zzu的博客
10-14 2399
cdh 官网下载地址 https://cn.cloudera.com/downloads.html 下载这三个文件 下载cloudera manager https://cn.cloudera.com/downloads.html 由于cdh 选择的是6.1.0，所以这里也选择6.1.0版本 整体架构 环境配置 在进行配置的时候，要根据自己电脑的配置，对虚拟机的配置进行调整。 我电脑是4核8线程，16G的内存， 在给虚拟机分配资源的时候，需要预留一...
Cloudera Manager 6.3.1.el7-part1
02-17
适用于CDH最后的一个免费版本的CDH6.3.2，用于CDH的本地源搭建.这部分是Cloudera Manager部分
Cloudera Manager 6.3.1.el7-part2
02-17
CDH6.3.2最后的免费版本，用于搭建本地在线安装环境，这部分是CM的第二部分，因资源太大，只能分开来上传
cloudera manager5.x版本集群搭建过程包括linux配置等
06-13
cloudera manager5.x版本集群搭建过程包括共享文件夹设置、centos配置、时间服务器等
Cloudera CDH新增节点到集群参考步骤
BabyFish13
09-20 1万+
1、新加机器环境配置 首先得在新的主机环境中安装JDK，关闭防火墙、修改selinux、NTP时钟与主机同步、修改hosts、与主机配置ssh免密码登录、保证安装好了perl和python。 2、上传cloudera-manager文件到/opt目录，修改agent配置文件： vi /opt/cm-5.7.0/etc/cloudera-scm-agent/config.ini server
大数据之cdh集群安装
yaodunlin的博客
08-16 1418
安装cdh集群
无法安装 cloudera-manager-agent 包
poem_2010的博客
03-01 5376
支持 admin 升级 Cloudera Manager Agent 软件包 Install Agents 所有主机上的安装均失败。 已成功完成 1 个主机中的 0 个。 安装失败后已在 1 主机上卸载。 主机名称 IP 地址 进度 状态 poem1 192.168.22.136 重试 | 详细信息 安装失败。 已卸载。 × 无法安装 cloudera-manager-agent...
大数据平台CDH的介绍和5.16/6.3版本的搭建
大宇进阶之路的博客
05-12 1万+
CDH介绍 Hadoop主流三大发行版本： 1. Apache hadoop 官方社区开源版本 2. CDH Cloudera版本（Cloudera’s Distribution Including Apache Hadoop，简称“CDH”），基于Web的用户界面,支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop,简化了大数据平台的安装、使用难度。 3. HDP 现在cdh已经将hdp收购。Cdh公司在2...
Cloudera&CDH安装配置说明
热门推荐
都是浮云
02-12 1万+
实验环境 实验环境：Win7下vmware虚拟机 操作系统：CentOS 6.5 x64 Clouder Manager：5.14.0 CDH：5.14.0 安装说明 官方共给出了3中安装方式：第一种方法必须要求所有机器都能连网，由于最近各种国外的网站被墙的厉害，我尝试了几次各种超时错误，巨耽误时间不说，一旦失败，重装非常痛苦。第二种方法下载很多包。第三种方法对系统侵入性最小,最...
Cloudera-Manager-agent 误删恢复
jast
01-15 1815
场景： 同事操作失误，将agent节点误删了 解决方法 1.对比正常agent节点与被删除节点安装包差异 yum list installed |grep cloudera 2.通过和正常的服务器对比我们发现，丢失的只有cloudera-manager-agent.x86_64 3.查看yum源中所有cloudera-manager组件： yum search c...
CDH集群离线部署(CM6.3.1 + CDH6.3.2 + CentOS7)
小宇的博客
10-11 8496
CDH集群部署 1.1原生Hadoop的问题 版本管理过于混乱 部署过程较为繁琐,升级难度较大 兼容性差 安全性低 1.2CDH和CM(ClouderaManager) CDH(Cloudera’s Distribution Including Apache Hadoop),是Hadoop众多分中的一种，由Cloudera公司维护，基于稳定版本的ApacheHadoop构建，并集成了很多补丁，可以直接用于生产环境。就是Hadoop等大数据安装包的第三方版本的集合，提供了Hadoop等大数据服..
CDH集群完全卸载过程
Harry Wong的博客
12-04 3603
摘要CDH(Cloudera Distribution Hadoop)完全卸载删除。 CDH集群卸载过程 1.成功停止集群 2.解除并移出parcels (先删除parcels包，再删cluster集群) (1)成功停止集群后，点击图标 (2)点击停用 (3)停用集群上CDH (4)移出CDH 此步骤删除节点上 /opt/cloudera/par...
Cloudera Manager的作用有没有部署
最新发布
06-13
Cloudera Manager的作用在Hadoop集群的部署方面也是非常重要的，它可以帮助企业进行Hadoop集群的部署和配置，包括以下方面： 1. 自动化部署：Cloudera Manager可以自动化完成Hadoop集群的部署，包括各种组件的安装、配置和启动等。通过自动化部署，可以大大减少管理员的工作量，提高部署效率和准确性。 2. 组件管理：Cloudera Manager可以管理和配置Hadoop集群中各种组件，如HDFS、YARN、MapReduce、HBase、Hive等。它可以帮助企业对组件进行配置、部署、启动、停止和监控等操作，以满足不同业务需求。 3. 集群扩展：Cloudera Manager可以帮助企业对Hadoop集群进行扩展，包括添加新的节点、增加存储容量等。通过集群扩展，可以提高集群的处理能力和可靠性。 4. 集群配置：Cloudera Manager可以帮助企业对Hadoop集群进行配置，包括网络配置、安全配置、性能配置等方面。通过集群配置，可以满足不同业务需求，提高集群的效率和稳定性。 综上所述，Cloudera Manager在Hadoop集群的部署方面发挥着重要作用，可以帮助企业快速、准确地完成Hadoop集群的部署和配置，提高部署效率和可靠性。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值