Cloudera Manager —— 端到端的企业数据中心管理工具

原文

本文翻译自 Cloudera Manager 官方手册——CLOUDERA MANAGER : End-To-End Administration for Your Enterprise Data Hub

---

概览

Cloudera Manager 使用领先的整体界面，提供端到端的系统管理和关键企业功能，可在企业数据中心的各个部分中提供细粒度的可见性和控制。

Cloudera Manager 是唯一可用的企业级 Hadoop 管理应用程序：授权操作员提高集群性能，提高服务质量，提高合规性并降低管理成本。

---

简单、有效地管理 Hadoop 集群

像任何分布式计算或存储平台一样，部署并且持续的 Hadoop 集群管理可能困难且耗时。

此外， Hadoop 由数十个组件和版本组成，可以基于用例部署；给节点分配角色；在整个集群上有效地配置和管理；通过诊断以优化集群性能。

如果没有整体的管理工具，这可能需要大量的专业知识并且持续的精力投入。

Cloudera Manager 的设计使得 Hadoop 的管理简单明了，因此您可以专注于最重要的业务。

使用 Cloudera Manager ，您将获得：

• 领先的界面：唯一的企业级 Hadoop 管理 应用程序，具有关键的企业功能，例如零停机的滚动升级，备份和灾难恢复，以及与 Cloudera Support 的直接集成，以便更快地解决问题。
• 简单有效：一个界面，可以轻松管理数十个 Hadoop 组件这样复杂的事情，该界面可提供您的数据和 Hadoop 系统周围的上下文，并且简化工作流程以使管理员更加具有生产力。
• 广泛的第三方集成：最广泛的合作伙伴网络允许您轻松将 Hadoop 和 Cloudera 集成到您现有的系统中，同时删除了必须单独管理它们的复杂性，以确保企业数据中心的全部功能。

Cloudera Manager 可以作为 Cloudera Express 和 Cloudera Enterprise 的一部分。

借助 Cloudera Express ，您将获得一套完整的功能，以部署，配置，监视，诊断，保障和扩展您的集群——这是所有供应商中最全面，最先进的管理功能集。

当您升级到 Cloudera Enterprise 时，您将获得其他企业功能，以与 Cloudera 的合作伙伴网络集成，零停机的滚动升级，备份和灾难恢复以及直接访问 Cloudera Support，这是关键任务的应用程序所必需的。

---

简化管理、降低损耗

• 管理：轻松地部署，配置和操作集群，使用集中式，直观的管理，用于所有服务，主机和工作流
• 监控：通过热图，主动的健康检查和提醒，保持集群中所有活动的中心视图
• 诊断：轻松诊断和解决来自操作报告、仪表板、事件、直观的日志查看和搜索，审核跟踪以及集成 Cloudera Support 的问题
• 集成：直接与 Cloudera Manager 一起管理关键的第三方应用程序，并通过 SNMP，SMTP，全面的 API 与现有的企业工具集成

"我们每天都使用 Cloudera Manager 来管理和深入了解我们的集群。对我们来说，这改变了游戏规则。” —— Gravity 首席技术官 Jim Benedetto

---

Cloudera Manager 的关键特性

特性	描述	Cloudera Express	Cloudera Enterprise
管理
自动部署和 Hadoop 准备检查	在几分钟内安装完整的 CDH 软件栈，并确保最佳设置	✔️	✔️
服务管理	从中央界面，配置和管理所有 CDH 服务，包括 Impala 和 Search	✔️	✔️
安全管理	在整个集群中配置和管理安全性 —— 包括Kerberos 身份验证和基于角色的（管理员和只读）管理	✔️	✔️
高可用性	轻松为 HDFS，MapReduce，Oozie，YARN，HBase 配置和管理高可用性	✔️	✔️
客户端配置管理	集中配置所有客户端访问集群	✔️	✔️
节点和集群模板	通过为节点角色和集群创建模板来轻松部署和扩展异质集群	✔️	✔️
全面的工作流	执行端到端任务，例如开始/停止/重启集群，服务和角色，添加/删除主机，退役节点等	✔️	✔️
多集群管理	从 Cloudera Manager 的一个实例中管理多个 CDH 集群	✔️	✔️
监控
服务，主机和活动监控	获取在集群中运行的所有服务，主机和活动状态的合并实时视图	✔️	✔️
事件和告警	创建，汇总和接收与系统健康，日志消息，用户操作和活动设置阈值有关的相关 Hadoop 事件的警报，并为 Cloudera Manager 收集的指标创建自定义警报	✔️	✔️
诊断
全局时间控制	将所有视图沿着可配置的时间线相关联，以简化诊断	✔️	✔️
主动健康检查	监视数十个服务性能指标并在接近关键阈值时获取警报
热图	可视化整个集群的健康状况和指标，以快速识别问题节点并采取行动	✔️	✔️
自定义图表	报告和可视化关于服务，角色和主机的关键时间序列指标
智能日志管理	从集群中收集，查看和搜索 Hadoop 日志	✔️	✔️
集成
全面的 API	轻松将 Cloudera Manager 与您现有企业范围内的管理和监视工具（包括 Isilon）作为替代存储后端	✔️	✔️
第三方应用管理	为在集群上运行的第三方应用程序部署，管理和监视服务（例如，数据集成工具，数学/机器学习应用程序，非 CDH 服务等）	✔️	✔️
高级管理功能（通过订阅启用）
操作报告和配额管理	可视化当前和历史磁盘使用情况； 设置用户和基于组的配额； 跟踪 MapReduce，Impala，YARN 和 HBase 的使用情况	❌	✔️
配置历史记录和回滚	保持所有动作的踪迹和完整的配置更改记录，包括回滚到以前状态的能力	❌	✔️
集群利用率报告	对用户，租户和应用程序的历史使用情况和效率的可见性	❌	✔️
滚动更新	对集群的部分有序的阶段服务更新和重启，以最大程度地减少升级或更新集群时的停机时间	❌	✔️
AD Kerberos 集成	直接与 Active Directory 集成以轻松的开始使用 Kerberos	❌	✔️
Kerberos Wizard	轻松配置 kerberos 并触发自动化工作流以保护集群	❌	✔️
Hadoop SSL 相关配置	简化配置并消除安全阀的需求	❌	✔️
LDAP/SAML 集成	将用户凭据与 Active Directory 集成并启用单点登录（SSO）功能	❌	✔️
SNMP 支持	将特定于 Hadoop 的事件和警报作为 SNMP traps 发送到全局的监控工具	❌	✔️
定时的诊断	取出集群状态的快照，并自动将其发送给 Cloudera Support，以协助优化和问题解决	❌	✔️
自动备份和灾难恢复	为 HDFS，Hive 和 HBase 配置和管理快照和复制工作流	❌	✔️