CDH6.2.0安装（一）

最新推荐文章于 2024-05-23 17:22:29 发布
最新推荐文章于 2024-05-23 17:22:29 发布
阅读量317 收藏
点赞数
分类专栏： 大数据 文章标签： 大数据 hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/CJ_66/article/details/108854264
版权

CDH6.2.0安装（一）

大数据搭建

大数据集群搭建方式选择

逐个安装大数据组件:

  • 优点：灵活，深入各组件安装细节
  • 缺点：繁琐，无统一监控、管理工具

使用CDH，Ambari管理工具安装：

  • 优点：一站式安装大部分组件，提供监控、管理功能
  • 缺点：需要更多的资源，安装过程有一定复杂性

建议：机器资源足够则使用CDH方式，否则使用逐个安装方式

什么是CDH？

全称：Cloudera’s Distribution Including Apache Hadoop，Cloudera 公司的Hadoop版本，包含大数据组件和监控管理工具（Cloudera Manager)两部分

Cloudera Manger 架构

image

image

CDH 6.2.0 组件版本
ComponentComponent Version
Apache Hadoop3.0.0
Apache HBase2.1.2
Apache Hive2.1.1
Hue4.3.0
Apache Impala3.2.0
Apache Kafka2.1.0
Apache Spark2.4.0
Apache Sqoop1.4.7
Apache ZooKeeper3.4.5

完成参考

演示集群系统软件版本
  • 操作系统：centos 7 64位
  • CDH：6.2.0
  • JDK：1.8
机器资源
  • 内存：主机在20G以上，可以搭建三台虚拟机，其中master内存在8G以上，slave内存在4G以上
  • 硬盘：每个虚机的硬盘空间100G+
集群结构

image

需下载的安装包
安装包下载地址
centos镜像http://vault.centos.org/6.8/isos/x86_64/
parcel：所有大数据组件，以二进制方式打包在一个文件中https://archive.cloudera.com/cdh6/6.2.0/parcels/。注意下载的版本必须与操作系统版本一致，否则在安装的时候会重新下载对应的版本
Clouder Manager相关文件https://archive.cloudera.com/cm6/6.2.0/
CJ_66
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
CDH6.0安装
jilige2019的博客
03-11 514
CentOS7安装CDH6.0 请务必注意CDH6的安装前置条件包括如下： 外部数据库支持： MySQL 5.7或更高 MariaDB 5.5或更高 PostgreSQL 8.4或更高 Oracle 12c或更高 JDK Oracle JDK1.8，将不再支持JDK1.7 操作系统支持 RHEL 6.8或更高 RHEL 7.2或更高 SLES 12 SP2或更高 Ubuntu 16或更高 本次测试...
CDH5.16安装
qq_36065938的博客
02-11 474
文章目录安装步骤一、硬件准备二、软件准备三、准备环境查看linux版本关闭 selinux安装 ntp禁用防火墙安装 JDK网络设置四、MySQL 安装(主节点)五、集群安装安装 CM安装 CDH 安装步骤 一、硬件准备 阿里三台 4h32g云主机 外网 39.102.36.162 39.102.37.229 39.102.38.17 内网： 172.17.96.141 master 172...
CDH6.2.0搭建（史上最全的安装教程）
热门推荐
逆流而上Mr李
05-08 1万+
1 集群准备 1 首先准备三台虚拟机，虚拟机ip地址可以ping通。 ip 名称 192.168.63.131 cdh1 192.168.63.132 cdh2 192.168.63.133 cdh3 2 系统环境准备 在三台虚拟机上 进行网络配置， 免密登录、防火墙关闭、selinux关闭 ...
遭遇网游盗号木马Trojan-PSW.Win32.OnLineGames等
Purpleendurer@CSDN
04-03 3580
endurer 原创2007-04-02 第1版昨天，一位网友说他的电脑中了病毒Trojan-PSW.Win32.OnLineGames.jj等，Kaspersky 6杀不了，让偶帮忙处理。到他家时，他正在用Kaspersky 6全面扫描，发现一些病毒，弹出询问提示框，还没等我们选择处理方式，就关闭了。扫描完成后，系统自动重启。选择带网络连接的安全模式，启动Kaspersky 6，导出
CDH 6.3.2安装部署（超详细）
最新发布
2201_75470972的博客
05-23 2122
超级详细的cdh6.3.2安装部署教程
Cloudera-manager搭建安装集群CDH6.2.0
qq_36306519的博客
04-27 672
Cloudera-manager搭建安装集群CDH6.2.0
CDH6.2 Linux离线安装
sinat_28371057的博客
12-01 437
1.概述 　　CDH，全称Cloudera's Distribution, including Apache Hadoop。是Hadoop众多分支中对应中的一种，由Cloudera维护，基于稳定版本的Apache Hadoop构建，提供了Hadoop的核心（可扩展存储、分布式计算），最为重要的是提供基于web的用户界面。 　　CDH的优点：版本划分清晰，更新速度快，支持Kerberos安全认证，支持多种安装方式（如Yum、rpm等）。 　　CDH分为Cloudera Manager管理平台和CDH p
大数据平台CDH 6.2.0 环境搭建
Dream_bin
08-29 3379
大数据平台CDH 6.2.0 环境搭建 一、概述 ​ Cloudera版本（Cloudera’s Distribution Including Apache Hadoop，简称“CDH”），基于Web的用户界面,支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop,简化了大数据平台的安装、使用难度。 因为公司测试环境，...
大数据平台CDH6.2.0安装部署
10-27
大数据平台CDH6.2.0安装部署 大数据平台CDH6.2.0安装部署是指使用Cloudera Manager 6.2.0版本安装和部署大数据平台的过程。该过程包括安装Cloudera Manager Server、配置MySQL数据库、部署CDH Parcel文件、配置...
CDH6.2.0安装详细步骤.docx
07-24
该资源用于CDH6.2.0的本地安装。 CDH是Apache Hadoop和相关项目的最完整、最受测试和最流行的发行版。CDH提供Hadoop的核心元素-可伸缩存储和分布式计算-以及基于web的用户界面和重要的企业功能。CDH是Apache许可的...
CDH6.2.0完整安装包网盘下载地址
03-15
本人亲自安装测试通过后整理的的cdh6.2.0离线安装教程 cdh6.2.0安装部署教程.txt mysql-connector-java-5.1.47.tar.gz mysql-5.7.26-1.el7.x86_64.rpm-bundle.tar cloudera-manager-daemons-6.2.0-968826.el7.x86_64...
CDH 6.2.0 安装文档.docx
06-07
该操作书适用于 CDH6.X+CentOS7.X。 可以按照文档step by step 完成 CDH6.X+CentOS7.X以及周边系统的搭建。
phoenix-parcel-5.0.0-cdh6.2.0-el7安装包
08-03
【描述】"phoenix-parcel-5.0.0-cdh6.2.0-el7" 是Phoenix的一个特定版本，它经过了与CDH 6.2.0的兼容性测试，确保在该版本的CDH上运行良好。Parcel是Cloudera分发软件的一种方式，它允许用户以一种安全且可管理的...
CDH6.2.0集群安装配置
这个bug不太难的博客
09-14 561
CDH6.2.0集群安装配置 1.环境准备 1.1 修改主机名 hostname cdh1 hostname cdh2 hostname cdh3 1.2 修改主机名映射 vi /etc/hosts 192.168.189.130 cdh1 192.168.189.131 cdh2 192.168.189.132 cdh3 1.3 关闭防火墙 启动时关闭 systemctl disable firewalld.service 关闭防火墙，不是永久生效 systemctl stop
CDH6.2.0部署
fzxiaocai的博客
03-14 1882
CDH6.2.0部署 服务器信息 服务器 主机名 安装服务 密码等信息 192.168.66.10 mysql.cdh.lczy.com cloudera-manager-server httpd mysql-5.7 数据库初始密码和安装路径信息如下: mysql_root_pwd=“CDH6.2_lczy” mysql_install_path="/usr/local" 192.168.66.11 cdh11.lczy.com 简单初始化 jdk 192.168.66.12 cd
CentOS7.6搭建CDH6.2.0以及集群间部分数据迁移的方式
Jason__zhu的博客
06-01 2067
CentOS7.6搭建CDH6.2.0以及部分数据迁移的方式 一、基础准备（CentOS7基础服务搭建） 1、网络配置 2、映射 vi /etc/hosts 3、免密登录 ssh-keygen -t rsa一路回车，生成无密码的密钥对。 将公钥添加到认证文件中：cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys，并设置authorized_keys的访问权限：chmod 600 ~/.ssh/authorized_keys。 ssh-copy-id
离线部署 Cloudera Manager 5 和 CDH 5.12.1 及使用 CDH 部署 Hadoop 集群服务
weixin_34342578的博客
09-25 368
Cloudera Manager Cloudera Manager 分为两个部分：CDH和CM。 CDH是Cloudera Distribution Hadoop的简称，顾名思义，就是cloudera公司发布的Hadoop版本，封装了Apache Hadoop，提供Hadoop所有的服务，包括HDFS,YARN,MapReduce以及各种...
CDH 6.2.0 安装指导
tmljob的专栏
11-12 103
1 说明 该操作书适用于 CDH6.X+CentOS7.X。 2 准备 ◎CDH安装包 ◎操作系统 i)完成安装; ii)完成搭建CentOS操作系统yum源，详见其他参考文档； ◎数据库 Mysql数据库已完成安装，详见其他参考文档； 说明：以下操作都是在root用户下进行的。 3 环境准备 3.1 服务器规划 IP hostname 角色 10.19.151.141 cdhclu...
【CDH部署】全网最简单CDH6.2.0环境部署
refbit的博客
02-19 1512
下载链接 官方下载链接: https://archive.cloudera.com/cdh6/6.2.0/parcels/ 百度网盘下载链接: https://pan.baidu.com/s/1Dm5Elf9uQqn14BUbgU3AFQ 提取码: mws3 主机规划 sparkproject1 manager 8G 50GB sparkproject2 agent 4G 50GB sparkpr...
cdh6.2.0 删除监控数据后 service monitor时发生内部错误
12-30
在CDH 6.2.0版本中，当删除监控数据后再次启动Service Monitor时出现内部错误可能是由于删除监控数据后导致系统无法正确识别或访问相关数据而引起的。此问题可能需要进行一些操作和调整来解决。 首先，我们可以尝试重新启动整个CDH集群，并确保监控数据删除成功地重新加载到系统中。在重新启动之前，可以尝试清理和重置一些缓存或数据存储以确保系统在重新加载数据时不受影响。 其次，可以尝试查看CDH集群的日志和错误报告，以了解具体的错误信息和发生问题的根本原因。根据错误信息，可以进一步采取相应的措施来解决问题。 另外，我们还可以尝试升级或更新CDH集群的相关组件或版本，以解决可能由旧版本或不兼容的组件导致的问题。在升级或更新之前，建议备份相关数据和配置，以防意外情况发生。 最后，如果以上方法都无法解决问题，建议联系CDH集群的技术支持团队或厂商进行进一步的咨询和支持。他们可以针对具体的情况提供定制化的解决方案和支持，以帮助解决Service Monitor时发生的内部错误问题。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值