cdh集群安装--host配置问题导致agent失败

最新推荐文章于 2023-03-24 15:34:30 发布
最新推荐文章于 2023-03-24 15:34:30 发布
阅读量1.3k 收藏
点赞数 1
分类专栏： CDH
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wflh323/article/details/94739634
版权

遇到几次有人在安装cdh的时候将hostname 配置成了带下划线 "_"，而导致agent安装失败，无法启动agent ，/var/log下无异常日志。异常配置如下：

192.168.1.1 cluster_01.example.com cluster_01

host 采用全域名标准配置，不要使用大写和 "_"下划线

示例:

192.168.1.1 cluster-01.example.com cluster-01

192.168.1.2 cluster-02.example.com cluster-02

192.168.1.3 cluster-03.example.com cluster-03

 

 

 

kevin_wf
关注
专栏目录
原生SUSE Linux下安装CDH5.14.x版本页面安装Agent出现域名bogon导致的失败
qq_36454119的博客
07-07 306
1.前提环境 从SUSE Linux官网下载的原生镜像SLE-12-SP2-Server-DVD-x86_64-GM-DVD1.iso 在VMware12下完成镜像安装，并通过挂在iso文件配置了zypper本地镜像源 安装CDH版本为CDH_5.14.2 2.问题复现 cm节点（cloudera manager）已安装完毕cloudera server服务 登录CDH页面，添加识别主机，识别到从节点nn和dn后，开始为从节点安装Agent服务 cm节点安装正常，nn和dn节点安装Agent失败
CDH中agent出现MainThread agent ERROR Heartbeating to hadoop101:7182 failed.
Jecky的博客
10-09 5905
突然出现CDH瘫痪，是因为agent某个节点出现了突然死机，然后重启了之后就成下面这样了。 启动CDH很明显会报错，报这个有问题的agent丢失 查看这个agent的节点日志，会发现报： [30/Sep/2020 11:42:26 +0000] 21536 MainThread agent ERROR Heartbeating to hadoop101:7182 failed. Traceback (most recent call last): File "/opt/cloudera/cm-age.
CDH 6.x版本WebUI界面安装agent时 无法复制安装文件
Why Do You Run
06-28 7977
CDH 6.x版本踩过的坑 CDH搭建时没有装TLS安全认证（当时是直接跳过） （如果装了TLS认证以后装组件service就比较麻烦 所以就跳过了Auto TLS认证） 就因为这一步，导致下面步骤 从manager端分发agent到其它主机报错 无法复制安装文件 为什么报这个错？ 原因是你不仅没有安装TLS认证，你又想从官网上下载包，导致下载失败！ 解决方案就是配置本地库喽~~~~~ 在上一...
cdh 安装 agent失败
langzi_hadoop的博客
11-16 746
rpm安装的方式： /var/lib/cloudera-scm-agent此目录如下文件是否有如下三个文件 cm_guid response.avro uuid 如果没有如下操作： 杀掉如下进程: netstat -anp |grep 9000 ps aux | grep super 重新启动agent
CDH常见错误之主机添加
最新发布
予挚之的博客
03-24 2185
集群添加主机时出现的错误问题
CDH6.0.1集群完全离线安装
tt_cxy的博客
03-28 3817
来自 张秋雨 的 cdh6.0.1部署文档
ubuntu完全分布式搭建CDH集群（Cloudera Manager）
04-20
- 在 `/opt/cloudera-manager/cm-host/` 目录下使用 `./cm-agent-installer.bin` 在所有节点上部署 CM Agent。 4. **安装 CDH 集群**: - 上传 `CDH-5.10.0-1.cdh5.10.0.p0.41-trusty.parcel` 文件到 CM Server。 ...
cdh5.14 mysql8安装_CentOS7+CDH5.14.0安装全流程记录，图文详解全程实测-7主节点CM安装子节点Agent配置...
weixin_39692557的博客
02-09 544
主节点安装cloudera manager准备工作：下载CM和mysql连接驱动包：CM各版本下载地址：http://archive.cloudera.com/cm5/cm/5/从里面选择：http://archive.cloudera.com/cm5/cm/5/cloudera-manager-centos7-cm5.14.0_x86_64.tar.gz 下载即可。这里驱动的版本要比Mysql的...
CM+CDH 从0-1大数据集群基本搭建超级详细步骤
bwf317的博客
12-10 575
一 ：环境准备： 创建虚拟机命名为：democdh （虚拟机磁盘至少选60G，内存也要尽可能大写，我选的8G） 修改Windows中的host文件添加主机域名映射： 192.168.133.222 democdh 修改虚拟机democdh主机名： 命令：vi /etc/hostname 内容：democdh 修改域名映射： 命令：vi /etc/hosts 最后一行后添加内容：192.168.133.222 democdh 修改ip地址以及网管等：命令：vi /etc/sysconfi...
CDH5.7.6-CentOS6安装
weixin_44224310的博客
07-05 547
1.概述 本文档主要描述离线环境下，CentOS6.7操作系统部署CDH5.7.6 的过程。本安装文档主要分为3个步骤： 1.环境准备（包括hostname、关闭防火墙、关闭SELinux、时钟同步等） 2.安装Cloudera Manager Server 3.安装CDH集群 1.1.环境预置 操作系统：CentOS 6.7 JDK: 1.8.0_171 Mysql版本：5.1.73 CM版本...
从CDH Agent错误日志学习Python拆包语法
shirukai
10-11 508
从CDH Agent错误日志学习Python拆包语法 国庆七天长假回来上班，迟迟没有进入工作状态，可能祖国的强大，让我不自觉的也飘了起来，哈哈，该收拾收拾心情，为祖国之繁荣而努力加班挣money了。今天通过解决公司开发环境的一个问题，让我瞬间进入了战斗状态，并且顺便学了一下Python拆包的一些语法，还是挺有意思的。 1 CDH Agent错误日志解决 放假回来，同事发现公司开发环境的CDH集群挂...
CDH问题处理
MY BLOG
08-15 2172
现象：CDH所有服务报异常，HDFS提示存储空间为0；在CDH管理界面中能够看到集群中所有的主机，但是主机的信息看不到。 处理过程： 1）试图重启agent，但是所有的DataNode都提示agent正在运行 2）jps查看进程发现根本没有java进程在运行 3）运行cloudera-scm-agent status显示进程已死，但PID文件仍存 4）通过在cloudera-scm-agent脚本中输出PID文件名字，定位到PID文件 5）可以发现PID文件是个空文件，将PID文件删除 6）启
CDH5 完美手动配置过程改进版
胡耕永的专栏
03-10 9620
一、安装前准备： 操作系统：CentOS 6.5 64位操作系统 环境：jdk1.7.0_45以上，本次采用jdk-7u55-linux-x64.tar.gz master01 10.10.2.57 namenode 节点 master02 10.10.2.58 namenode 节点 slave01:10.10.2.173 datanode 节点 slave02:10.10.2.59
cdh集群认证命令
weixin_30711917的博客
01-07 226
1.集群认证命令 kinit -kt csliyb.keytab csliyb 2.查看认证有效期命令 klist命令 3.延长认证有效期命令 kinit -R 4.手动认证失效命令 kdestroy 转载于:https://www.cnblogs.com/liyanbin/p/10233503.html...
Error (Allocation failed: No healthy hosts with sufficient resources available)
csdnmuyi的博客
09-20 1606
使用rancher的添加容器的时候会出现这个问题,我说一下我这遇见这个问题的原因: 我原先添加了两个主机:内容如下: 其中有一个主机是断开的 针对这种的情况,你只需要在创建容器的时候,指定用哪个主机就行了 ...
修改cdh5集群中主机节点IP或hostName
weixin_30740581的博客
01-14 266
前言 　　在使用cdh集群过程中，难免会因为某些不可抗拒的原因导致节点IP或hostName变动，而cm的监控界面无法完成这些事情，但是cm将集群中所有的主机的信息都存在postgresql数据库的hosts表中， 现在让我们来通过修改hosts来完成这个操作。 第一步，关闭服务 1. 关闭集群服务，及 Cloudera Management Service，2. 关闭cm服务：（ ...
Centos7 安装部署 CDH6.1.0 手册
liuwei0376的专栏
08-05 2176
目录 一、CDH6简介 4 CDH6支持的组件列表： 4 二、CDH6安装前环境准备 5 1、CM6.1.0以及CDH6.1.0的安装： 5 2、CM & CDH Parcel包准备 5 3、创建CM & CDH组件存储库 6 4、 在主节点配置CDH6.1.0二进制Parcel仓库 6 5、 配置yum仓库 6 6、每台服务器进行系统环境设置： 7 A).安装...
CDH大数据平台 Role not started due to unhealthy host(多种解决方法)
80后大叔爱学习
11-02 1186
Role not started due to unhealthy host
SSH走过的坑：netstat command not found / Destination Host Unreachable /
时间流浪者
10-16 1362
1、创建虚拟机： 2、在自己的虚拟机上设置IP，先ping 在当前网段哪个IP可用。进入/etc/sysconfig/network-scripts，vi ifcfg-eth0, IPADDR为当前网段可用的IP，配置网关、子网掩码等信息，重要：ONBOOT=yes 3、service network restart重启网络。CentOs7中，这个地方应该使用systemctl ne...
CDH集群安装详解：步骤全面指南
安装完成后，还需要配置数据库驱动，安装和配置CDH代理（agent），并将parcels包正确放置。 接着，通过Web界面启动CM服务器和agent，验证安装是否成功，并登录到CM管理页面，开始添加和管理服务，如Hadoop、Spark等...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值