CDH Hadoop集群运维记录-日常问题一

最新推荐文章于 2022-12-07 07:00:00 发布
最新推荐文章于 2022-12-07 07:00:00 发布
阅读量255 收藏 1
点赞数
分类专栏： 大数据 文章标签： CM集群 故障排查 服务重启 时钟偏差 磁盘清理
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xiaohai798/article/details/113248780
版权

CM联系错误

 

 

解决

service cloudera-scm-agent restart 重启过一会再刷新看cm集群的状态

 

时钟偏差问题

 

 

解决

  1. 首先 service ntpd stop
  2. 手工更新一次 ntpdate –d nn1（一般是集群的nn1节点）
  3. service ntpd start
  4. 最后Service cloudera-scm-agent restart

 

问题解决：

 

磁盘空间不足

 

 

解决

清理对应的磁盘挂载目录

果木
关注
专栏目录
大数据之CDH 集群部署
csdnwindnorth的博客
10-19 683
Cloudera Manager cloudera manager的概念 简单来说，Cloudera Manager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具（软件）,使得安装集群从几天的时间缩短在几个小时内，运维人员从数十人降低到几人以内，极大的提高集群管理的效率。 cloudera manager的功能 1.管理：对集群进行管理，如添加、删除节点等操作。 2.监控：监控...
CDH集群运维手册
09-05
CDH集群运维手册，最新的CDH版本，支持各种平台 CDH集群运维手册，最新的CDH版本，支持各种平台
Cloudera CDH集群运维手册
01-09
Cloudera CDH集群运维手册，带截图的，挺详细，有用Cloudera cdh集群的可以看看
cdh运维问题相关整理.docx
04-18
cdh运维问题相关整理。 Cloudera Manager 是 CDH 市场领先的管理平台。作为业界第一的端到端 Apache Hadoop 的管理应用，Cloudera Manager 对 CDH 的每个部件都提供了细粒度的可视化和控制，从而设立了企业部署的标准。通过 Cloudera Manger，运 维人员得以提高集群的性能，提升服务质量，提高合规性并降低管理成本。
CDH运维
xuexi的专栏
07-30 1074
CDH启停 路径 /settle/cm-5.10.2/etc/init.d 命令./cloudera-scm-server restart 参数：restart start stop status 启动顺序 138 需要起那个 server agent ，140 142 起 agent 需要用root用户登录,root/test.com 地址：172.21.11.138:7180...
CDH-TXKT-集群的维护
DCHAO的博客
08-22 383
检查hdfs的文件情况 不像linux的fsck，只能检查不能修复 如果遇到损坏的块，可以move，之后会自动再复制一份 dfsadmin，进行hdfs文件管理 report 资源的使用情况(空间)、块信息 refreshNodes 添加或移除节点后使用。配合黑白名单使用。 安全模式： 启动hdfs后，会自动进入，检查完再推出退出，用来检查块的数量是不是达到要求， 安全模式只能读不能写。 enter、leave、wait 保存元数据 distcp 同一集群内部也可以使用 如果2个集群的版本差距过大.
hadoop-2.6.0.tar.gz&hadoop-2.6.0-cdh5.16.2.tar.gz
02-17
这个版本还包含了其他相关工具，如Hadoop命令行工具、Hadoop守护进程等，用于管理和操作Hadoop集群。 而hadoop-2.6.0-cdh5.16.2.tar.gz则是Cloudera公司推出的基于Hadoop 2.6.0的CDH（Cloudera Distribution ...
Hadoop运维问题记录
Java海洋
11-22 2403
昨天同事遇到一个hadoop故障，找了半天没看出问题，问到我这里，花了一会解决了一下，估计这是我给暴风的集群解决的最后的故障了，以后就不定给谁解决问题去了。 只截下来了Namenode的报错Log，Datanode的刷屏刷过去了，不过都差不多。 1 2 3 4 5 6 7 8 9 10
hadoop cdh 安装笔记
06-11 134
  3 https://ccp.cloudera.com/display/CDHDOC/CDH3+Installation https://ccp.cloudera.com/display/CDHDOC/HBase+Installation https://ccp.cloudera.com/display/CDHDOC/ZooKeeper+Installation https://c...
hadoop-2.6.0-cdh5.14.2.tar.gz
05-12
6. 运行测试任务，验证Hadoop集群是否正常工作。 此外，CDH还提供了额外的管理和监控工具，如Cloudera Manager，方便用户对整个集群进行一站式管理，包括安装、配置、监控和优化。这些工具简化了Hadoop在企业环境中...
CDH集群大数据hadoop报错解决办法及思路整理-绝对干货
12-22
CDH集群大数据hadoop报错解决办法及思路整理，主要解决大数据在运行过程中所遇到的问题，相关解决办法都是实践验证过。
大数据【经典文档】：CDH集群运维手册【61页】.docx
04-30
CDH集群运维手册
大数据【经典文档】：CDH集群部署安装运维手册【61页】.docx
12-02
大数据【经典文档】：CDH集群部署安装运维手册【61页】、大数据【经典文档】：CDH集群部署安装运维手册【61页】.docx大数据【经典文档】：CDH集群部署安装运维手册【61页】.docx
【200页】CDH安装运维手册
大数据研习社
05-05 2809
1.200页CDH大数据集群运维手册 2.内容涵盖大数据集群安装、节点管理、用户管理、资源管理和安全管理
CDH6.2相关问题汇总（定期更新）
on the way . . .
09-01 1351
Background 在公司搭建了一套大数据平台 ，基于CDH6.2，在使用过程遇到的问题会在此记录，以便在以后的工作中不断完善。 Trouble 1 Host Cloud01 has upper-case characters in its name. Authentication through Kerberos will not work correctly in this case. solution：主机名host尽量不要使用大写。 Trouble 2 Java HotSpot(T
CDH全手册
weixin_30482383的博客
04-02 686
Centso7+CDH5.11.0部署流程 软件准备： 　　 jdk-8u131-linux-x64.tar.gz 　　CDH-5.11.0-1.cdh5.11.0.p0.34-el7.parcel 　　CDH-5.11.0-1.cdh5.11.0.p0.34-el7.parcel.sha1 　　manifest.json 　　cm5.11.0-centos7.tar.gz 　　...
CDH运维问题列表
没事看看书
11-09 5825
我在使用hadoop过程中，积累及解决的一些问题
CDH6集群部署
weixin_34245749的博客
09-18 674
大数据集群管理方式分为手工方式（Apache hadoop）和工具方式（Ambari + hdp 和Cloudera Manger + CDH）主机：192.168.0.32：Server+agent192.168.0.33：agent192.168.0.34：agent安装之前准备环境：网络名称CDH需要IPv4。不支持IPv6。按如下方式配置群集中的每个主机，以确保所有成...
运维实战100：CDH5.16.2升级至CDH6.3.2
最新发布
涤生大数据
12-07 1749
本期来分享一个cdh企业运维实战案例，将现有集群CDH版本由5.x版本升级为6.3.x版本。
Hbase运维手册-CDH
02-17 696
1.region情况 需要检查 1. region的数量（总数和每台regionserver上的region数） 2. region的大小 如果发现异常可以通过手动merge region和手动分配region来调整 从CDH前台和master前台以及regionServer的前台...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值