- 博客(10)
- 收藏
- 关注
RSS订阅转载 如何卸载CDH（附一键卸载github源码）
1.前置条件本文档将介绍Cloudera Manager与CDH的卸载，并基于CDH使用parcels安装且未配置安全（AD/LDAP, Kerberos, Data Encryption）的集群，以下是本次测试环境，但不是本操作手册的硬限制：1.操作系统版本：CENTOS6.52.MySQL数据库版本为5.1.733.CM版本：CM 5.114.CDH版本：CDH 5.115.采用r...
2019-02-18 13:20:52
331
转载 如何迁移Cloudera Manager节点
1.概述本文档讲述如何将Cloudera Manager在Kerberos环境下迁移至新的CM节点。通过本文档，您将学习到以下知识：1.如何迁移Cloudera Manager节点2.如何迁移MySQL元数据库3.如何迁移Kerberos MIT KDC文档主要分为以下几步：1.准备Cloudera Manager新节点2.MariaDB数据库迁移（可选）3.迁移Kerberos ...
2019-02-18 12:23:55
746
转载 Zookeeper指标分析
1. 问题描述通过CDH管理平台，进入Zookeeper管理界面，Zookeeper的平均请求延迟、最小请求延迟、最大请求延迟指标趋势图维持不变，指标数据异常。2.问题复现登录CDH平台，进入Zookeeper管理页面，查看Zookeeper各服务器状态，页面如下：查看如下指标平均请求延迟、最小请求延迟、最大请求延迟三个指标维持不变，指标异常。3.问题分析3.1 指标来源该...
2019-02-13 23:54:51
1209
转载 Hive表字段Comment中文乱码
1.问题描述默认Hive中创建有中文注释的表时，无论是在Hive CLI还是Hue中该注释显示都会是乱码。如使用以下建表语句：create external table test_table(s1 string comment 'abc',s2 string comment '你好啊')row format delimited fields terminated by '#'...
2019-02-13 00:20:56
999
转载 Windows Kerberos客户端配置并访问CDH
1.概述本文描述Windows Server 2008 R2（windows的内核版本时6.1，与windows 7相同）下安装Kerberos Client 及FireFox 下 HTTP访问 HDFS ，Yarn，Hive ，HBase等Hadoop服务的Web UI（如Namenode的50070，Yarn的8088）的过程。安装文档主要分为一下几步：1.在Windows Serve...
2019-02-13 00:07:15
2199
转载 HashMap的ConcurrentHashMap
前言Map 这样的 key Value 在软件开发中是非常经典的结构，常用于在内存中存放数据。本篇主要想讨论 ConcurrentHashMap 这样一个并发容器，在正式开始之前我觉得有必要谈谈HashMap ，没有它就不会有后面的ConcurrentHashMap。HaspMap众所周知 HashMap 底层是基于 数组 + 链表组成的，不过在jdk1.7 和1.8中具有体实现稍有不...
2019-02-08 01:01:55
68
转载 如何在CDH中使用LZO压缩
1.问题描述CDH中默认不支持Lzo压缩编码，需要下载额外的Parcel包，才能让Hadoop相关组件如HDFS，Hive，Spark支持Lzo编码。具体请参考：https://www.cloudera.com/documentation/enterprise/latest/topics/cm_mc_gpl_extras.htmlhttps://www.cloudera.com/docum...
2019-02-05 13:24:02
870
2
转载 CENTO7.2安装CDH5.10和Kudu1.2(二)
5 Kudu 安装CDH从5.10开始，打包继承Kudu1.2，并且Cloundera正式提供支持。这个版本开始Kudu的安装较之前要简单很多，省去Impala_Kudu,安装完Kudu，Impala即可直接操作Kudu。以下安装步骤基于用户使用Clodera Manager来安装和部署Kudu1.25.1安装 文件1.下载csd文件[root@ip-172-31-2-159 ~]# ...
2019-02-05 02:25:39
455
转载 CENTOS7.2安装CDH5.10和Kudu1.2(一)
1.概述本文描述CENTOS7.2操作系统部署CDH企业版的国车给。Cloudera企业级数据中心的安装主要分为四个步骤:1.集群服务器配置，包括安装操作系统，关闭防火墙，同步服务器始终等;2.外部数据库安装3.安装Cloudera管理器;4.安装CDH集群;5.集群完整性检查，包括HDFS文件系统，MapReduce，Hive等是否可以正常运行。这篇文档将着重介绍Cloudera管...
2019-02-01 13:19:11
443
转载 CDH网络要求(Lenvovo参考架构)
1.组网配置建议的Cloudera组网配置如下图,主要包含数据网络和管理网络。2.数据网络数据网络是用于数据访问的节点之间的私有集群数据互连，比如在集群内的节点之间移动数据，或者将数据导入CDH集群.CDH集群通常会连接到企业内部的数据网络。需要两个TOR交换机:一个用作带外管理，一个用于CDH的数据网络。节点的带外管理至少需要一个1GbE交换机。数据网络的交换机一般为10GbE，具体取决...
2019-01-31 13:23:28
719
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人