CDH6.3.1搭建

最新推荐文章于 2023-09-13 08:55:46 发布
最新推荐文章于 2023-09-13 08:55:46 发布
阅读量338 收藏
点赞数
文章标签： cloudera docker
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/TianLiaoFeiJue/article/details/106235747
版权

概述

1:没有多台物理机 采用 docker环境搭建
docker 镜像: 860492946/centos7jdk8shh
此镜像基于 centos7 , 已经安装 ssh jdk8 vim等基础组件

下载mysql的jdbc驱动

安装5.7版本的mysql ,失效 SSL

下载 CDH

cdh路径: https://archive.cloudera.com/cm6/6.3.1/

安装 CDH

1: 多台镜像 设置 ssh免密登录
2:master 安装 cm
3:salve 安装 agent

配置 cm的数据源为 自己的mysql地址

启动 cm

TianLiaoFeiJue
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
CDH6.3.1 企业级真正离线部署 (踩坑+总结)
涵sir的博客
10-14 2570
前言 大数据集群管理方式分为手工方式（Apache hadoop）和工具方式（Ambari + hdp 和Cloudera Manger + CDH）。手工部署，需配置太多参数，但是，好理解其原理，建议初学这样做，能学到很多。该方式啊，均得由用户执行，细节太多，切当设计多个组件时，用户须自己解决组件间版本兼容问题；工具部署，比如Ambari或Cloudera Manger。（当前两大最主流的集群管理工具，前者是Hortonworks公司，后者是Cloudera公司）使用工具来，可以说是一键操作，难点都在
ubuntu18安装CDH6.3.1
zhdan~的专栏
02-02 3423
ubuntu18安装CDH6.3.1
Hadoop完全分布式集群搭建
qq_41422941的博客
10-13 292
Hadoop环境搭建 一、环境描述 VMware15(12/14也可以) Linux系统：3台CentOS6.8（三台可以相互ping通） 连接工具：MobaXterm jdk：java1.8.0_131 hadoop：hadoop2.7.2 节点搭建： bigdata01 bigdata02 bigdata03 NameNode – secondaryNameNode DataNode DataNode DataNode – ResourceManager
[CDH6.3.1集群搭建] 通过CM 从零开始安装 和设置 cm server，部署CDH集群
小哇
09-30 1057
首先确保以下步骤都成功进行，没有特别说明的话，集群中每个节点都要执行以下的步骤 linux系统为Centos7.2，CDH的版本6.3.11 配置 hostname，每个节点都把集群的所有hostname都加上，注意 ip 是内网iphttps://blog.csdn.net/qq_41712271/article/details/1086890312 防火墙设置https://blog.csdn.net/qq_41712271/article/details/1086890793禁用 SELinux...
CDH6.3.1 平台搭建
何以问_的博客
08-12 1130
自测–CDH6.3.1 搭建 (2核16G阿里云环境) 1.准备工作 1.1部署方式 本次测试采用离线部署的方式 : 主要分为三块 : Cloudera-Manager离线部署 MySQL离线部署 Parcel文件离线源部署 1.2集群规划 节点 MySQL部署组件 Parcel⽂文件离线源 CM服务进程 大数据组件 hadoop001 MySQL Parcel Activity Monitor NN RM DN NM hadoop002 Alert Publisher Eve
CDH6.3 搭建文档
雪辉博客
11-30 732
文章目录一、概述二、部署规划2.1 Cloudera Manager2.2 CDH parcel2.3 软件目录三、环境配置3.1 配置映射3.2 关闭防火墙&selinux3.3 配置互信3.4 创建用户3.5 安装jdk3.6 配置NTP3.7 安装MySQL驱动程序四、安装MySQL4.1 创建MySQL用户组和用户4.2 解压软件&目录配置4.3 配置环境变量4.4 修改配置文件4.5 初始化&启动数据库4.6 创建相关数据库&用户五、Cloudera-manager
cdh6.3.1离线完整版（百度网盘下载）
08-04
CDH安装包
CDH6.3.1详细安装教程及安装包(包括视频教程)
05-31
CDH-6.3.1-1.cdh6.3.1.p0.1470567-el7.parcel CDH-6.3.1-1.cdh6.3.1.p0.1470567-el7.parcel.sha1 cm6.3.1-redhat7.tar.gz jdk-8u181-linux-x64.tar.gz mysql-5.7.11-linux-glibc2.5-x86_64.tar.gz mysql-connector-...
CDH6.3.1发行版，idea本地调试spark连接hive仓库demo
FengYeHanQiu的博客
02-25 1582
最近接手个CDH6.3.1版本的大数据集群，以前我搭建的都是apache原生Hadoop集群，通过编辑器调试sparkSQL读取hive很容易。现在遇到CDH整合后的集群还是有点不习惯，找到cdh环境中的hive-site.xml里面配置基本没用。网上找了许多感觉没有正解，我按照原生apache的hive-site.xml配置更改了下，可以实现本地idea调试启动spark程序读取hive表。 项目结构 hive-site.xml配置 <?xml version="1.0"?> &l
cdh6.3.2+cm6.3.1+gpl安装包.txt
09-10
百度云资源，官网下载慢所以上传上来了 cdh6.3.2安装包 cloudera 6.3.1安装包 gpl 安装包
CDH6.3安装指南.pdf
09-11
最详细的CDH6.3安装指南，可以一步步按照文档进行安装，并且整理了安装介质（通过百度网盘下载）。
CDH6.3.1安装
Allenzyg的博客
05-28 5833
CDH6.3.1安装遇到很多问题，我想主要是由于条件有限，毕竟自己的电脑内存不如专业集群的内存大（如果是内存和硬盘充足，有些是可以避免的，甚至不会出现报错的情况），这里就介绍一下我用VMware安装的虚机中搭建CDH集群的辛酸历程。为了避免多次、重复安装不成功，所以需要具备以下条件： 1. 内存要足够大 我的电脑内存是8G： 使用虚拟机安装 Cloudare server：4G Cloudare agent：分别为1G 电脑最后很卡，而且内存98%。 官方推荐最小内存为10G，所以最好还是听从官方的建...
CDH 6.3.1正式环境安装过程及注意事项，帮你一步到位
xuye0606的博客
08-16 2585
第一部分 环境检查及准备： 1.1 基础环境及镜像包准备 1.1.1 基础环境要求 名称 地址 操作系统 root密码 cdh-0001 10.1.0.30 Centos 7.7 ***** cdh-0001 10.1.0.105 Centos 7.7 cdh-0001 .
CDH6.3.1 集群离线部署（若泽大数据）
浅汐入梦的博客
05-09 1863
参考了很多文章，中间报了很多错，一步一坑...... 视频链接：https://www.bilibili.com/video/BV1YE41117xM?spm_id_from=333.337.search-card.all.click
【技术调研】安装CM 6.3.1和CDH 6.3.2
02-27 1193
操作系统要求 在安装CDH之前，我们来看看平台对系统有什么样的要求。通过官方文档，我们可以看到有5个方面的要求： 软件依赖 CDH和CM支持的依赖 文件系统要求 nproc配置 Kudu所要求的nscd 软件依赖 Python 操作系统带的Python是支持的（Hue和Spark会有一点问题），但Python 3.0或者更高版本是不兼容的。CDH 6要求OS需要Python 2.7或者更高的版本，而Spark 2需要Python 2.7或者更高版本的支持，但Spark 3只支持Python
CDH 集群离线部署、大数据组件安装与扩容详细步骤(cdh-6.3.1)
一只小白
09-13 1172
CDH在实际集群部署中，需要先搭建cm-server服务，然后在各个节点部署cm-agent服务。难点全部在cm-server服务搭建阶段和cm-agent环境初始化。后面涉及到大数据组建的搭建全部是在CDH页面操作，大家可以多摸索摸索使用。
Cloudera Manager6.3.1&CDH6.3.2集群部署（超详细，亲测可用）
矿泉水瓶子
01-11 2093
Cloudera Manager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具，使得安装集群从几天的时间缩短在几个小时内，运维人员从数十人降低到几人以内，极大的提高集群管理的效率。
CDH6.3.1安装指南
Aisen_bear的博客
04-21 2674
CDH安装指南！！！！ CDH简介 CDH基于Web的用户界面,支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 HBase、Zookeeper、Sqoop，简化了大数据平台的安装、使用难度。 Cloudera Manager的功能： 管理：对集群进行管理，如添加、删除节点等操作。 监控：监控集群的健康情况，对设置的各种指标和系统运行情况进行全面监控。 诊断：对集群出现的问题进行诊断，对出现的问题给出建议解决方案。 集成：多组件进行整合 《准备工作》 CDH安装包网盘
cdh6.3.1parcel
最新发布
12-04
CDH 6.3.1 Parcel是支持Cloudera大数据平台的一种软件安装和部署方式。Parcel是一种二进制软件包的格式，用于在CDH集群中分发和安装各种组件和服务。CDH 6.3.1 Parcel即表示适用于CDH版本6.3.1的Parcel软件包。 CDH...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值