集群管理系统CDH--概要

本文介绍了Apache Ambari和CDH作为Hadoop集群管理工具的作用和优势。Ambari提供对多种Hadoop组件的集中管理,支持安装、管理和监控,而CDH是Cloudera维护的Hadoop分支,具有清晰的版本划分和快速更新。文章探讨了在大规模集群环境下为何需要这样的管理工具,比较了手工部署与工具部署的优缺点,强调了CDH和Ambari对于高效集群管理的重要性。

 

 1.集群管理工具选型

1.1 什么是CDH,ambari?

Apache Ambari是一种基于Web的工具,支持Apache Hadoop集群的供应、管理和监控。Ambari已支持大多数Hadoop组件,包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeper、Sqoop和Hcatalog等。 
Apache Ambari 支持HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop和Hcatalog等的集中管理。也是5个顶级hadoop管理工具之一。Ambari能够安装安全的(基于Kerberos)Hadoop集群,以此实现了对Hadoop 安全的支持,提供了基于角色的用户认证、授权和审计功能,并为用户管理集成了LDAP和Active Directory。 
CDH(Cloudera’s Distribution, including Apache Hadoop)是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Hadoop构建,他提供了Hadoop的核心:可扩展存储,分布式计算;基于Web的用户界面 
CDH的优点:版本划分清晰;版本更新速度快;支持Kerberos安全认证;文档清晰;支持多种安装方式(Cloudera Manager方式

1.2 为什么需要他们

• 1000台服务器的集群,最少要花费多长时间来搭建好Hadoop集群,包括Hive、Hbase、Flume

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值