CDH环境准备及安装

最新推荐文章于 2023-03-06 11:16:47 发布
最新推荐文章于 2023-03-06 11:16:47 发布
阅读量124 收藏
点赞数
分类专栏： java架构 大数据 文章标签： cloudera Powered by 金山文档
原文链接：https://blog.csdn.net/wt334502157/article/details/120290580
版权

一. 环境准备

  1. 机器准备
  1. 修改主机名
  1. 配置检查
  1. 配置免密登录
  1. 配置hosts解析
  1. 安装包准备
  1. 关闭防火墙
  1. 关闭SELINUX
  1. 配置时间同步服务
  1. 调优系统swappiness参数
  1. 关闭透明大页面
  1. 安装python2.7
  1. 安装jdk1.8
  1. 安装MySQL5.7

  1. 拷贝 JDBC 驱动包到指定目录

二. 安装 Clouder Manager Server( cm-server )

三. 安装Clouder Manager Agent( agent )

四. 初始化 Clouder Manager 数据库表

五. 拷贝 Parcel 文件到指定目录

六. 启动 Clouder Manager Server

七. 启动 Clouder Manager Agent

SkyinEast
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
CDH集群安装前置准备及检查，CDH集群安装5.11.2版本
04-12
本文将深入探讨CDH集群安装的前置准备与检查，以及如何安装CDH 5.11.2版本。 首先，CDH 5.11.2是Cloudera在2017年发布的一个稳定版本，它包含了多个大数据处理组件，如Hadoop、HBase、Spark、Impala等，为企业提供...
cdh agent 安装
mllhxn的专栏
08-30 1338
准备环境略 添加cloudera manager service数据库： 启动MySQL：sudo service mysqld start 登陆MySQL控制台： mysql –u root -p create database amon DEFAULT CHARACTER SET utf8; create database rman DEFAULT CHARACTER
大数据CDH安装详细教程
weixin_43998265的博客
06-11 1887
CDH安装
CDH6.2.0详细安装步骤
热门推荐
努力努力再努力！的博客
07-19 7万+
1.准备集群 本文档使用的是三台虚拟机，IP和主机名自行修改，三台虚拟机需要能联网，并且能够免密登录，这些网上都能找到详细的教程，有问题也可以底部留言交流。 ip 名称 内存 172.17.0.169 node169 16G 172.17.0.170 node170 16G 172.17.0.171 node171 16G 2.安装JDK 百度网盘 链接：https://pan.baidu.com/s/1eR-ZAZNLBZwSLgUSmmlfEQ 提取码：95yu 2.1 创建
CDH环境搭建及部署
zero;
01-07 3093
CDH环境搭建及部署 一、概述 Cloudera版本（Cloudera’s Distribution Including Apache Hadoop，简称“CDH”），基于Web的用户界面,支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop。 二、安装部署 2.1 集群架构 序号 IP地址 主机名 系统版本 1 10.211.55.100 zero Centos 7.7 2 10.211.55.101 Had
【大数据集群搭建-CDH-（4）CDH部署前的环境准备】CDH版本进行大数据集群各组件环境部署-（4）CDH部署前的环境准备
weixin_53543905的博客
02-22 812
（2）另一方面在特殊场景下方便运维童鞋进行降级处理，比如类似于淘宝双十一这类大促活动，某个核心业务预期会有很大的流量涌入，为了保证核心业务的平稳，在资源共享的情况下只能牺牲其他非核心业务，在和非核心业务方充分交流沟通的基础上限制这些业务的资源使用，在流量极限的时候甚至可以直接停掉这些非核心业务。除此之外，还要考虑数据的不断增长，根据历史数据推算，每年用户量增长1倍，明年一年（或未来三年，根据公司财力来进行规划）内数据将达到3000G，加上1500G历史数据，共需存储4500G。
CDH5.15.1离线安装文档
12-23
本指南包含了离线安装CDH（Cloudera Data Hub）5.15.1的所有必要步骤，包括环境配置、软件准备、系统调整和集群构建等环节。读者需对Linux操作系统有一定基础，同时了解大数据处理的基本概念。 1.2 **关于CDH和...
CDH和Mysql安装脚本
03-19
CDH的安装通常涉及多个步骤，包括环境配置、JDK安装、CM(Cloudera Manager)准备、CM安装、CDH组件安装等。此脚本可能涵盖以下内容： 1. **环境检查**：首先，脚本会检查操作系统版本、硬件配置以及必备软件（如JDK...
大数据部署离线安装CDH操作指南（环境准备+Cloudera manager安装+CDH部署）
03-08
自己整理的CDH离线部署安装指南，可依据此部署步骤开发一键部署脚本程序，从而省去手动部署敲命令的繁琐过程。由于一键部署包好几个G，就不发出来了。
CDH5.12&CDH6.0安装文档.zip
07-20
2. **Kerberos安全**：CDH6.0强化了Kerberos认证，增强了数据安全性，安装时需预先配置Kerberos环境。 3. **Hive Metastore分离**：Hive元数据存储独立于HDFS，提高了查询性能。 4. **新组件**：如Impala 3.x，...
CDH5环境搭建
01-18
CDH5离线安装文档，包括安装过程中容易出现的错误，安装成功的截图，这里安装的是CDH5的免费版。
CDH6.x安装教程(附带整合kerberos)
qq_32068809的博客
02-02 5022
一、安装前准备 设置HOST vi /etc/hosts 关闭防火墙 sudo systemctl disable firewalld sudo systemctl stop firewalld 设置SELinux vi /etc/selinux/config 将SELINUX=enforcing 改为SELINUX=permissive，然后重启服务器，或者执行下面命令： setenforce 0 开启NTP服务 # 安装NTP服务.....
大数据之cdh集群安装
yaodunlin的博客
08-16 1465
安装cdh集群
CDH大数据平台入门篇之搭建与部署
最新发布
予挚之的博客
03-06 4870
CDH：存储各种类型的数据、使用各种不同的计算框架进行操作、能够快速集成和运行一个完整的Hadoop平台，适用于各种不同的硬件和软件、高安全性且能够部署多种应用，并扩展和扩充它们以满足你的需求、还可以放心地用于关键的商业任务。
【大数据集群搭建-CDH-（5）CDH环境搭建】CDH版本进行大数据集群各组件环境部署-（5）CDH环境搭建
weixin_53543905的博客
02-22 995
默认的方式下linux会把文件访问的时间atime做记录，文件系统在文件被访问、创建、修改等的时候记录下了文件的一些时间戳，比如：文件创建时间、最近一次修改时间和最近一次访问时间；如果提示ERROR JDBC Driver com.mysql.jdbc.Driver not found，需要上传mysql驱动包jar到/opt/cloudera/cm/lib目录下。因为系统运行的时候要访问大量文件，如果能减少一些动作（比如减少时间戳的记录次数等）将会显著提高磁盘 IO 的效率、提升文件系统的性能。
安装 | 企业版CDH服务器集群配置(详细)
木野归郎
03-04 4677
大家好，我是小轩
Hadoop(CDH)分布式环境搭建(简单易懂,绝对有效)
微信搜：import_bigdata，大数据领域硬核原创作者
05-06 651
大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！本文是由alice菌发表在：https://blog.csdn.net/weixin_4431...
CDH基础环境搭建
张不帅
07-20 567
文章目录简介架构搭建免密登陆配置集群同步脚本安装JDK（三台）集群整体操作脚本安装mysql,存储元数数据创建CM用的数据库下载第三方依赖永久关闭SELINUX 简介 Cloudera Manager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具，使得安装集群从几天的时间缩短在几个小时内，运维人员从数十人降低到几人以内，极大的提高集群管理的效率。 架构 (1)Cloudera...
CDH6在安装agent时，提示安装失败无法接收 Agent发出的检测信号
萌兔兔MMQ！！
08-15 3820
安装时是开启了Auto-TLS的，从Manager的管理->配置->安全界面看到的“为代理使用 TLS 加密”也是开启的，cdh104上的 config.ini 文件中的 use_tls 配置为0，因此我尝试修改为1，保存后通过 systemctl restart cloudera-scm-agent.service 命令重启了cdh104上agent，其他2个虚拟机的该配置没有修改。我在三台虚拟机上安装CDH6，进行到在web界面安装agent这一步，在“等待新安装的 Agent 检测信号…...
安装cdh6出现agent安装失败问题
qq_42937659的博客
04-17 2525
@TOC cdh6出现agent安装失败问题。 欢迎使用Markdown编辑器 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本语法知识。 新的改变 我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编辑器功能，我们增加了如下几点新功能，帮助你用它写...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值