CDH集群意外处理：集群个别主机断电处理

最新推荐文章于 2022-12-10 09:53:44 发布
最新推荐文章于 2022-12-10 09:53:44 发布
阅读量711 收藏 1
点赞数
分类专栏： CDH 文章标签： CDH 意外 断电
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u010886217/article/details/98673198
版权

一、    问题描述

大数据CDH集群几台机器莫名断电，CDH集群10台，5台莫名宕机，包括管理节点01。然后服务被关闭，但是，那些依旧开机的服务依旧开启。

二、    解决办法

思路就是重新开启cm然后，通过cm管理服务器，重新开启对应服务。
1.关闭CDH集群02节点上的备份mysql，重启01和02的mysql数据库
2.重启CDH的01节点的cm服务
3.登录：CM服务的7180服务端口。
4.重启所有服务
 

RayBreslin
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
CDH 集群安装流程
10-18
CDH集群搭建-cm5.11.1，包括cm包下载，cdh包下载，centos下载安装，时间同步，网络配置，免密ssh，防火墙配置，hostname，安装Cloudera Manager，数据库驱动，agent配置，parcels包放置，启动cm server 和 agent，使用web登录cm管理页面并管理添加服务；经本人亲自试验安装成功并运行，按照流程基本无问题
CDH集群重启
善皮之的博客
03-14 1780
重启CDH集群 首先在CDH集群的7180的端口，将cloudera的监控服务和整个集群都停掉，然后切换到命令行中，手动停止cloudera-scm-agent角色和cloudera-scm-server角色 停掉集群 停掉监控的服务 在所有的集群节点上面执行以下命令（以下目录是我这边的环境，请对应自己的安装目录自行修改） cd /opt/cloudera-manager/cm-5.10....
问题解决：CDH重启报错，启动不了的解决步骤
枫夜
05-22 5535
因为园区突发断电，导致服务器断电。部署在服务器上面的CDH集群都挂了。现在需要重新启动起来，但是重启之后，服务一直启动不起来。本篇博文主要是针对这种情况，阐述解决问题的思路和问题解决的过程。
Cloudera的Hadoop发行版CDH5和CDH6各个版本停止支持的时间
ClouderaHadoop的博客
07-07 2388
停止支持的意思是不再更新和修复bug，厂商不再向这个版本的用户提供技术支持。CDH5到今年年底全部停止支持。
CDH节点断开时间过长连接不上处理方案
sxyqhyt的博客
04-24 1346
节点断开时间过长处理方法：   [root@slave1 ~]# /etc/init.d/cloudera-scm-agent status cloudera-scm-agent dead but pid file exists     [root@slave1 ~]# service httpd status httpd is stopped [root@slave1 ~]#...
CDH集群主节点宕机恢复
weixin_30375427的博客
09-30 846
1 情况概述 公司的开发集群在周末莫名其妙的主节点Hadoop-1的启动固态盘挂了，由于CM、HDFS的NameNode、HBase的Master都安装在Hadoop-1，导致了整个集群都无法使用，好在数据不在启动盘。 Hadoop-1的系统必须重装，但是不能重装集群，因为要将之前的数据全部保留恢复，所以只能通过集群恢复的手段将集群重新跑起来。 主要服务角色安装情况： Hado...
CDH6.3.2集群部署手册
最新发布
03-26
CDH6.3.2集群部署手册是用于指导用户在其环境中部署Cloudera Distribution for Hadoop（CDH）版本6.3.2...通过按照手册提供的步骤逐步操作，用户可以顺利地搭建一个稳定、可靠的CDH集群，用于其大数据处理和分析需求。
使用IDEA工具连接CDH集群里面的hive组件
10-06
IDEA工具 连接CDH集群里面的hive组件 亲自测试通过 可以连接使用
CDH集群部署.doc
03-21
采用在VM虚拟机上搭建方案，虚拟机环境VMware Workstation Pro12；虚拟三台机器方案，一主两备；内存：主节点4G，磁盘50G；目标集群作为测试环境使用，主要用于本机开发及维护测试。
CDH集群软件安装手册@20191118.docx
11-18
CDH6.2安装手册完整版，离线安装 详细描述裸机的专网机器，如何搭建CDH集群，包括其中各个组件的安装 如有疑问，请联系
CDH问题总结——主机运行状况不良
bboy枫亭的博客
06-03 3051
看下官方文档给的解决办法：https://docs.cloudera.com/documentation/enterprise/release-notes/topics/cm_rn_known_issues.html#rn_OPSAPS-34847 （CDH5和6都可以用这个办法） 问题所在： Block agents from heartbeating to a Cloudera Manager with different UUID until agent restart cm_guid 文件的内容就.
CDH节点宕机后HDFS和YARN高可用切换演练
weixin_33022765的博客
03-14 555
CDH节点宕机后HDFS和YARN高可用切换演练 一、 背景及目标 为保障CDH集群的高可用，提升CDH运维经验，实施本次CDH主节点和主节点宕机后的高可用切换演练。 主节点和子节点组件分配如下： 模拟bjhtom-ap-bigData-flink102主节点以及bjhtom-ap-bigData-flink105子节点的宕机。 二、 内容 停止bjhtom-ap-bigData-flink105子节点所有组件 停止bjhtom-ap-bigData-flink102 主节点所有组件（包括CDH管理组
cdh断电后故障解决 -- process information unavailable
m0_49027804的博客
10-20 198
机房断电，服务器意外关机，-- process information unavailable
亚马逊 cdh集群非正常关机重启之后 节点不健康 节点丢失 服务无法启动 集群资源吃满 jps显示一大堆 rmadmincli 进程
yy的博客
08-02 549
现象 关机后发现 cdh管理界面很多 更新配置 的按钮, 而且jps显示了很多rmadmincli 的进程,这个进程是yarn的进程,cdh配置更新是因为亚马逊服务器重启自动修改了服务器的hostname. 贼特么坑. cdh自适配给你修改了和hostname相关的服务的配置文件. ...
关于集群突然断电的解决方法
小菜鸟的成长之路
04-13 687
今天在测试的时候，数据正在入库。突然断电了。 重启动以后，启动./start-dfs.sh以后，查看日志，会报出 2012-04-13 15:39:43,208 INFO org.apache.hadoop.ipc.Server: IPC Server handler 9 on 8020, call rollEditLog() from 196.1.2.160:34939: error: or...
CDH大数据节点宕机测试
欢迎来到李奇峰的数据世界
05-25 935
一、集群现状 集群组件说明：目前集群中安装了若干大数据相关组件，包括HDFS、Hbase、Hive等存储相关组件与Flume、Spark、Kafka等数据采集与处理相关组件。 集群主机说明：目前集群中有5台主机，为同一台宿主机上的5台虚拟机。为确保HDFS副本正常分布，故主机cdh1、cdh2、cdh3的机架设置为“test1”，cdh4、cdh5的机架设置为“test2” 注：Hadoop在设计时考虑到数据的安全与高效，数据文件默认在HDFS上存放三份，存储策略为: 第一个副本放在其中一台节点中 第
CDH中某一结点任务异常，节点服务重启失败报错：No space left on device
weixin_42151880的博客
12-10 862
cdh运维
CDH集群异常关闭导致zookeeper启动失败
cesgo的博客
02-01 6143
集群异常关闭后，有个zookeeper节点始终无法启动，CM上的日志没有明显的报错 解决思路：  1.尝试通过命令行启动zkServer.sh  start，查看zookeeper.out，发现报如下错误 Unexpected exception, exiting abnormally java.io.EOFException at java.io.DataInputStre
cm集群问题
qq_42173978的博客
12-15 401
搭建cm集群爬过的坑（云服务器上）懒得弄格式了1.问题:不良 : 该主机已与 Cloudera Manager Server 建立联系。 该主机未与 Host Monitor 建立联系。2.error: No socket could be created on ('NexusHadoopVM', 9000) -- [Errno 99] Cannot assign requested add 1....
CDH集群kudu使用
08-16
CDH集群中的Kudu是一种快速、可扩展的列式存储引擎，适用于需要实时分析和快速数据访问的工作负载。Kudu与Hadoop生态系统无缝集成，可以与HDFS、HBase和Impala等组件一起使用。 要在CDH集群中使用Kudu，需要按照...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值