Cloudera 向集群添加主机

最新推荐文章于 2023-05-26 18:46:51 发布
最新推荐文章于 2023-05-26 18:46:51 发布
阅读量4.8k 收藏 1
点赞数
分类专栏： Hadoop-YARN Hadoop-HDFS
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Team77/article/details/51564991
版权
本文详细介绍了在离线模式下使用Cloudera Manager向现有集群添加主机的过程，包括必须先安装JDK和Cloudera Manager Agent，配置Agent指向Server。由于新主机上的服务可能依赖rack信息，如Flume、Hive等，因此添加后需要重启除HDFS和ZK外的集群。
摘要由CSDN通过智能技术生成

本文将概述使用Cloudera Manager向集群中添加主机的操作。

首先，我们这里是采用的离线安装模式安装的，所以对于你新的主机你必须配置好如下几个内容：

  • 安装好JDK
  • 安装好Cloudera Manager Agent
  • 配置Agent指向Server

操作流程

Created with Raphaël 2.1.0 添加节点 在CM界面选择主机
最低0.47元/天 解锁文章
DV2
关注
专栏目录
Cloudera Manager集群搭建
yuxiaojianran的博客
10-10 396
aa
cdh集群中添加新主机
萌兔兔MMQ！！
03-09 1432
一、新加机器环境配置python 首先得在新的主机环境中安装JDK，关闭防火墙、修改selinux、NTP时钟与主机同步、修改hosts、与主机配置ssh免密码登陆、保证安装好了perl和python。linux 二、上传cloudera-manager文件到/opt目录，修改agent配置文件：web vi /opt/cm-5.7.0/etc/cloudera-scm-agent/config.inishell server_host = Mastervim vim etc/cloudera-scm-ag
cloudera5.13.0手动添加新主机操作步骤
maximiliansheng的专栏
05-23 1631
准备工作 第一步：配置主机名 新机器初始化，挂载好硬盘，配置好hostname，例如 hadoop9 hostname hadoop9 ​ vim /etc/sysconfig/network ---- HOSTNAME=hadoop9 ---- ​ vi /etc/sysctl.conf ---- vm.swappiness = 10 ---- ​ sysctl -p ​ 第二步准备：...
修改CM管理主机IP（CDH5.0集群IP更改）
NanoTang's Blog
11-18 4387
在一个 原本在3台机器中部署了Cloudera CDH4.8的集群环境，运行状况良好，后来由于机房搬迁，导致那3台机器的ip地址被改变（hostname 没有变化）。 再次启动Cloudera-scm-server，登陆进去看时，发现manager根本不认识那3台机器了。 无奈在“主机”的选项中需找修改的方法，发现Cloudera-manager那个鬼东西，根本没有考虑ip地址会
Cloudera CDH新增节点到集群参考步骤
热门推荐
BabyFish13
09-20 1万+
1、新加机器环境配置 首先得在新的主机环境中安装JDK，关闭防火墙、修改selinux、NTP时钟与主机同步、修改hosts、与主机配置ssh免密码登录、保证安装好了perl和python。 2、上传cloudera-manager文件到/opt目录，修改agent配置文件： vi /opt/cm-5.7.0/etc/cloudera-scm-agent/config.ini server
CM方式搭建集群---基础准备
多哥仁慈的骆驼
12-24 886
生产中的集群规模： 一般情况下，在生产环境中根据集群查的规模分成三种 一，小型集群 20台以内 二, 中型集群 50台以内 三，大型集群 50台以上 基本组件的配置： 1.zookeeper 一，小型集群：3-5个节点 ...
如何向CDH集群添加主机节点
u010585659的博客
08-22 1805
不知不觉干了两年多的大数据开发&运维，想当初入职时因为大数据组开发人手不足（就后来带我的一个人），把本来投的是运维开发岗的我调去了大数据组。虽然当时早就听说做大数据很有前途，但本硕学的都是通信工程的我完全没有基础啊不敢投啊，不知是人品好或是运气好该庆幸自己走了狗屎运转到了有“前途”的岗位，还是因为我的简历上有做Python开发的实习经历，反正我是体会到了大公司对应届校招生调岗是多么的随意。于是从这之后就开始了我的踩坑之旅。。。之所以来CSDN写博客了，是因为踩过的坑如果不记录是不知道什么时候又会再踩
Ubuntu14.04在线安装Cloudera Manager集群部署
09-25
### Ubuntu14.04在线安装Cloudera Manager集群部署 #### 一、环境准备与基础知识 在开始之前，我们先来了解下整个部署过程所涉及的一些基础概念和技术要点。 - **Ubuntu 14.04**: 一种广泛使用的开源操作系统，...
基于cloudera搭建大数据集群（docker）记录
u013093426的博客
06-01 1066
1安装docker 安装最新稳定版的 # step 1: 安装必要的一些系统工具 sudo yum install -y yum-utils device-mapper-persistent-data lvm2 # Step 2: 添加软件源信息 sudo yum-config-manager --add-repo https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo # Step 3: 更新并安装Docker-CE sudo
使用虚拟机搭建ClouderaManager平台，并自动部署一个hadoop集群（CDH）
CycloneKid的博客
01-19 1908
本文将从最基础的环境配置开始，介绍如何在Linux虚拟机中搭建一个CM集群，并使用CDH自动部署一个Hadoop集群。 文章目录一.CM及CDH介绍CMCDH二.准备工作2.1 硬件资源分配2.2 下载需要的各种安装包1.基础工具JDK和MySQL2.CM安装包3.CDH离线库2.3 安装JDK2.4 设置免密登录2.5 关闭SELINUX2.6 安装MySQL并创建CDH需要的数据库安装MySQ...
使用CM安装部署CDH集群的一个总结
Axel_Fran的博客
03-05 644
第一 安装mysql，和 java jdbc-mysql 的一个jar包 添加到 java 中 第二 2.1安装Cloudera Manager Server 三个包 [root@h1 cloudera-scm-server]# yum search cloudera =========================== N/S matched: cloudera ============================ cloudera-manager-agent.x86_64 : Th..
CDH集群添加新服务器
最新发布
bnuib521的博客
05-26 584
把ntp服务加入到服务器启动中systemctl enable ntpd。在CM的管理界面，点击主机，Add Hosts 疯狂下一波即可添加完成。执行命令hostnamectl set-hostname sh-1。执行命令hostnamectl set-hostname sh-2。~/.ssh/authorized_keys到新机器上。可以执行ntpdc -np查看ntp运行情况。vim /etc/rc.local 添加。在13上修改文件/etc/hosts，修改sh-1跟sh-2的ntp配置文件。
CDH及软件安装部署
erainm
12-18 739
1. Linux配置优化 1.1 Swappiness虚拟内存 swappiness是Linux的一个内核参数，控制系统在使用swap虚拟内存时，内存使用的相对权重。 swappiness参数值可设置范围在0到100之间。 此参数值越低，就会让Linux系统尽量少用swap虚拟内存分区，多用内存；参数值越高就是反过来，使内核更多的去使用swap空间。推荐设置为10。根据服务器硬件配置会有变化。 临时生效： sysctl -w vm.swappiness=10 永久生效： echo “vm.swappines
Cloudera Manager API使用(附代码)
weixin_42529806的博客
09-30 5181
Cloudera Manager API使用 前言 1. 需求：如何获取CDH集群的资源使用情况，包括cpu、磁盘、内存 2. 实现：调用CDH提供的Cloudera Manager API包，来实时访问CDH上的各种监控指标数据，如下图 接口介绍 1 获取集群信息 2 获取主机信息 3 获取服务信息 4 获取指标时序数据信息 5 详细信息看：官网文档，使用实例demo：后面 - cloudera官网文档：https://docs.cloudera.com/do...
cdh 添加新主机
cyz52的博客
12-15 1452
1.1说明 CDH机器添加分三种方式 页面向导添加(最好离线) 软件包手动安装 原始码手动安装 第一种方式最简单，添加的节点会去主机下载安装包，但是在公网上ip反向解析域名，经常出错，离线会好点 第三种方式原始码安装需要自己指定管理目录 推荐第三种方式，会自动添加对应的服务，目录自动建立 这里分享第二种方式，软件包安装方法 1.2安装部署 主机名、ip等修改好，关闭防火墙，ssh免密码登录...
【原创】Cloudera Manager的CDH4主机修改和服务重装
weixin_30877227的博客
12-06 108
Cloudera Manager的CDH4主机修改和服务重装 　　前段时间安装好了CDH4.1后，运行了一段时间，后来，把主机IP地址改掉了，但是发现服务都启动不了，怎么办呢？想到的解决方式如下： 把主机IP地址改回来 CDH4.1上的IP地址改成和主机IP地址一样。 　　如下图，是我安装的CDH4.1的主机情况。 　　第一种方法改回主机IP地址后，重启Cloudera...
ClouderaManager6.3 单机搭建
wsq_strive的博客
08-27 2902
1、修改主机名 hostnamectl set-hostname n68 2、开启ntpd 自动同步时间，并加入开机启动 systemctl status ntpd \ && systemctl start ntpd \ && systemctl enable ntpd \ && systemctl status ntpd 3、下载Clo...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值