CDH异构系统部署(1)

最新推荐文章于 2024-05-28 17:07:23 发布
最新推荐文章于 2024-05-28 17:07:23 发布
阅读量472 收藏
点赞数 1
分类专栏： 个人总结
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wflh323/article/details/89001957
版权
本文介绍了如何使用Cloudera Manager在不同操作系统的服务器上安装和升级CDH集群，涉及CentOS 6.5和7.4版本。关键步骤包括按系统版本分类服务器、安装CM服务、添加主机、配置YUM源和Parcel源，以及根据向导逐步安装。
摘要由CSDN通过智能技术生成

工作中大数据集群可能会使用各种型号服务器安装不同的操作系统，今天介绍下Cloudera manager管理的cdh集群在不同操作系统的服务器上安装升级

系统版本:centos6.5, centos7.4

CM: 5.11.0, 5.14.4  el6 ,el7版本

CDH版本:5.11.1, 5.14.4 el6, el7版本

服务器:192.166.12.201, 192.166.12.202, 192.166.12.203 centos6.5

192.166.12.103 centos7.4

 软件下载地址：

   http://archive.cloudera.com/cm5/repo-as-tarball/5.14.4/

http://archive.cloudera.com/cdh5/parcels/5.14.4/<

最低0.47元/天 解锁文章
kevin_wf
关注
专栏目录
【大数据】手把手教CDH
wnm23的专栏
04-04 769
使用 LXC 的优点就是不需要安装太多的软件包，使用过程也不会占用太多的资源，LXC 是在 Linux 平台上基于容器的虚拟化技术的未来标准，最初的 LXC 技术是由 IBM 研发的，目前已经进入 Linux 内核主线，这意味着 LXC 技术将是目前最有竞争力的轻量级虚拟容器技术。增加的节点功能可以分为边缘节点，计算节点，主节点等，同样功能的节点也会因为服务器配置不同而需要采用不同的配置，例如不同大小的内存，硬盘等。1. Object，实体，常见的例如，server，database，table，URL。
CDH迁移 | 教你三步实现CDH迁移到星环TDH
资讯汇
04-01 1207
Transwarp Data Hub（TDH） 是星环科技自主研发的企业级一站式多模型大数据基础平台，其领先的多模型技术架构提供统一的接口层，统一的计算引擎层，统一的分布式存储管理层，统一的资源调度层，以及异构存储引擎层。8种异构存储引擎可以支持包括关系表、文本、时空地理、图数据、文档、时序等在内的10种数据模型。存算解耦特性支持弹性扩展，让资源配置更灵活。 星环一站式多模型大数据基础平台TDH架构图 TDH能够存储PB 级别的海量数据，同时能够提供高性能的查询搜索、实时分析、统计分析、预测性分
CDH异构操作系统下升级
wflh323的专栏
04-08 311
CDH异构操作系统下升级 1. 配置两个系统版本的parcel 源 2. 点击下载，从图可以看到默认只会下载parcel配置最后一个el7版本,el6的没下载导致失败 3. 将el6和el7d电话顺序重新点击下载 4. 显示正常，当系统版本不同时需轮换顺序进行两次下载 5. 分发 6. 点击升级，根据向导一步步操作即可，参...
OpenVINO工具套件高级课程第二课：如何构建一个异构系统?
Make something people want.
03-06 2741
OpenVINO工具套件高级课程第二课：如何构建一个异构系统?
HDFS异构存储实战
张伟的专栏
04-19 925
最近在做HBase跨机房的数据迁移，正好用到HDFS的异构存储，我们使用的场景是将WAL日志保存到SSD中，其他的数据则存储在普通的SATA盘中。既充分利用了本地SSD盘的空间，又达到了提升系统性能的目的。本文是对HDFS异构存储学习和使用的总结，以及对使用HDFS异构存储过程中遇到问题的总结，希望对广大技术网友有帮助。 一、异构存储是什么 所谓的异构存储就是将不同需求或者冷热的数据存储...
CDH集群操作经验常遇bug解决
阿正的博客
04-08 452
https://blog.csdn.net/u011026329/article/details/79167884
cdh适配国产化操作系统
最新发布
u011250186的博客
05-28 143
cdh适配国产化操作系统
从入门到精通 - Fayson带你玩转CDH
Hadoop_SC的博客
09-22 3965
Fayson保持每天推一篇文章，本文随之每天更新。 以下所有文章均为超链接，可以直接点击文章名跳转。 还没附上超链接的文章是还没上传的，会再后续更新后陆续补上 1.规划设计 1.1.on-premise部署规划 0001-《CDH网络要求(Lenovo参考架构)》 0062-《如何为Hadoop集群选择正确的硬件》 0158-《如何给Hadoop集群划分角色》 1.2.on private c...
0471-Oracle Goldengate实时复制Oracle数据到CDH Kafka
Hadoop_SC的博客
01-27 768
作者：Thomas Gu 1 Oracle Goldengate概述 Oracle Goldengate（以下简称OGG）是业界广泛使用的准实时数据复制软件，主要基于数据库日志进行变更数据的抽取，也就是我们常说的CDC（change data capture）的能力，Goldengate的优势主要体现支持各种异构环境下的数据复制，对生产库的影响最低（基于日志读取，非Sqoop这样直接查询数据的方式...
Hadoop之CDH安装
热门推荐
dongyunlon的专栏
03-30 2万+
1. 离线数据存储及查询环境部署 离线数据的存储与查询主要是以hadoop为中心的技术栈，包括hive，hbase，hue，kylin等。部署hadoop的方式比较流行的主要有三种： 1. 直接部署Apache Hadoop，即手工部署，需要自己配置，协调版本兼容等，好处是能够加深理解，但是过程较繁琐。 2. Ambari ：Hortonworks的产品，用于创建，管理，监视hadoop集群...
阿里云ECS服务器Centos7.6环境下部署CDH6.1.大数据集群
luoye4321的专栏
05-10 1857
阿里云购买同一地区下的三台服务器，操作系统为Centos7.6，内网地址分别是172.17.58.37 ，172.17.58.38， 172.17.58.39，对应的节点分别为node1,node2,node3,node1为主机。部署CDH6.1.0,详细部署过程如下： 一、基础环境配置（全部节点） 1、修改主机名 #hostnamectl set-hostname node1 #vi /...
CDH6安装教程(亲自测试越坑版)
IT- 研究者
09-12 5898
一、Hadoop大数据平台 1、Hadoop 发行版 (1) 完全开源的原生的Apache Hadoop (2) Cloudera与Hortonworks公司的CDH和HDP：在Cloudera和Hortonworks合并后，Cloudera公司推出了新一代的数据平台产品CDP Data Center（以下简称为CDP） (3) MapR公司的MapR(已经被HPE收购) (4) AWS亚马逊的EMR (5) 国内华为的fusioninsight (
5G NR标准 第4章　LTE概述
sundaygeek的专栏
10-16 4797
5G NR标准 第4章　LTE概述 LTE的工作始于2004年底，其总体目标是提供一种仅关注分组交换数据的新型无线接入技术。 LTE规范的第一个版本，即第8版，已于2008年完成，商业网络的运营于2009年末开始。第8版之后是后续的LTE版本，如图所示，它们在不同领域引入了附加的功能。 第10版是LTE-Advanced的第一个版本，第13版是LTE-Advanced Pro的第一个版本，于2015年年底完成。 当前，截至本文撰写之日，3GPP正在研究版本15，该版本除NR外还包含LTE的进一步发展。 4
ZStack部署实战之VDI异构部署
zstack_org的博客
03-19 2658
作者：ZStack社区 蒋克勤 前言 大家都知道ZStack是一个自主开发、功能齐全、轻量级的私有云和混合云平台，同时，ZStack作为一个开放的云平台，也能够支持各种云桌面终端的接入！大家可以结合着客户需求让客户进行云桌面的体验。 本次就给大家介绍一下ZStack私有云的一个亮点功能：部署方式-----VDI云桌面，并使用第三方云终端部署到我们的ZStack环境里面来。 环境介绍 实验组网 （...
异构操作系统cloudera manager agent升级
wflh323的专栏
04-04 346
前面我们介绍了异构操作系统下cdh集群的安装。安装成功后我们需要考虑后续维护如何升级等问题。本文先介绍下cloudera manager 和 agent的升级方法。使用集群为上篇文章安装的异构集群 具体详细升级步骤查看Clouder manager5.11.1升级到5.14.4，本文对一些关键差异步骤做出解释 第一种方式升级cm agent 1. 在cm主机192.168...
解析Cloudera Manager内部结构、功能包括配置文件、目录位置等
wulantian的专栏
11-26 2298
问题导读 1.CM的安装目录在什么位置？ 2.hadoop配置文件在什么位置？ 3.Cloudera manager运行所需要的信息存在什么位置？ 4.CM结构和功能是什么？ 1. 相关目录 /var/log/cloudera-scm-installer : 安装日志目录。 /var/log/* : 相关日志文件（相关服务的及CM的）。 /u
异构云操作系统需要具备的18总特性和3类支持
hyp的专栏
12-24 351
什么是云操作系统？ 相对于单机操作系统，网络操作系统。至少是可以管理10台以上物理机的操作系统，甚至是1万台以上的电脑。   1. 能够管理大量的硬盘， 提供分布式文件系统，逻辑上看起像一个硬盘。冗余管理，一个硬盘或部分硬盘失效文件不会丢失。可以动态的增加硬盘。可以动态的移除硬盘。   2. 提供虚拟机的管理功能，就是 Iaas。提供管理虚拟机的UI接口和程序接口。   3. 为...
Cloudera Manager CDH 5.12 完整部署手册
"这篇文档详细介绍了如何在CentOS 7.2环境下手动部署安装Cloudera Manager CDH 5.12，包括离线安装、系统环境设置、网络配置、主机命名以及安全设置等关键步骤。提供的参考资料包含了两篇CSDN博客文章和一份徐斌恩...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值