CDH5之时钟偏差问题

最新推荐文章于 2023-05-29 13:47:53 发布
最新推荐文章于 2023-05-29 13:47:53 发布
阅读量4.2k 收藏 4
点赞数
文章标签： 大数据 运维 python
原文链接：https://my.oschina.net/u/3754001/blog/3013663
版权
本文介绍了CDH5中遇到的时钟偏差问题及其影响，包括导致的系统问题和邮件预警频繁。提出两种解决办法：一是通过修改CDH主机的ntp偏差值临时缓解，二是永久性解决——配置ntp服务进行集群时间同步。建议配置本地ntp服务器，并在操作前关闭CDH相关服务。
摘要由CSDN通过智能技术生成

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

CDH5之时钟偏差问题

一、介绍

主机时钟偏差的问题，是分布式中各个主机之间存在系统时差，或者和ntp服务器的时间不同步造成的。如果集群之中没有配置ntp服务，那么时钟偏差会非常频繁，如下图：

由上图可由看出，这个问题的严重性，如果你配置了邮件预警，那么恭喜你，几分钟之内你的接收邮箱将要爆炸，但是这个问题也不严重，所以很烦人。

要解决这个问题，有两个方法：

  • 其一，修改CDH中主机的ntp偏差值，将这个值变大，增加容错。可见其治标不治本。
  • 其二，增加ntp服务，在集群中配置ntp服务，用来
最低0.47元/天 解锁文章
python安装lzo_CDH 5 安装教程，Kafka 安装，LZO 安装
weixin_39636245的博客
12-21 123
目 录主机列表|主机名 | IP |Memory| CPU | 角色及服务 | | :------- | ----: |:---: |:--- |:---| | test1.lan | 192.168.22.11 |9G|4核| cm-agent, Namenode, YARN | | test2.lan | 192.168.22.12 |9G|4核| cm-agent, SecondNameod...
CDH 6.2.0启用kerberos认证
weixin_45682234的博客
07-06 812
1. 整体说明 集群主机角色划分（cdh6.2.0（续）） n76.aa-data.cn作为master节点，安装kerberos Server 其他节点作为slave节点，安装kerberos client 2. 安装 Kerberos 在 n76.aa-data.cn上安装 krb5、krb5-server 和 krb5-client。 yum install krb5-server -y #klist等命令找不大时执行下面安装 yum install -y krb5-server krb5-works
CDH时钟偏差:无法找到主机的 NTP 服务，或该服务未响应时钟偏差请求。
最新发布
m0_49027804的博客
05-29 1054
1、单节点主机重启后，NTP服务正常，cdh界面就是报ntp服务异常2、单独重启NTP服务的时候。
CDH 时钟偏差 不良 : 无法找到主机的 NTP 服务，或该服务未响应时钟偏差请求。
xuye0606的博客
08-11 2949
首先：执行ntpstat，实时命令查看状态，结果发现所有服务器的状态都是未同步状态“unsynchronised”： 然后，重启ntp服务、手动时间同步、再重启服务（全部机器执行）： systemctl stop ntpd sudo ntpd -gq systemctl start ntpd 最后，执行timedatectl，查看服务器时间状态，发现NTP synchronized为true，说明时间同步成功了。并且各个节点与master之间的时间都保持...
记录一次帮网友解决CDH集群机器的时钟偏差
crazy_stone0002的博客
02-09 446
1.现象： home界面和主机界面的图表和各组件状态标识符都是灰色（正常是绿色） 2.尝试方法： 2.0 检查防火墙，python有无升级，是否ping通 2.1 尝试web重启 cloude...
启动CDH遇到的时钟不同步问题
m0_71519623的博客
03-31 1745
CDH服务器意外关闭以后，在重启CDH的几台服务器时，出现了时钟偏差问题。查看NTP状态，查看NTP进程，启动NTP服务，重启agent，重启CDH组件
CDH报时钟偏差问题尝试手段
weixin_46012962的博客
12-21 504
其中一种方式： 子节点时间从主节点同步（以一个子节点为例） 先加载NTP包 yum install -y ntp 再禁用和关闭子节点ntpd服务 然后将子节点同步至主节点 /usr/sbin/ntpdate xxx.hadoop20 最后设置每次自动同步时间 其他子节点依次重复如上步骤 ...
CDH：（时钟偏差）无法找到主机的NTP 服务,或该服务未响应时钟偏差请求
Jecky的博客
10-16 2730
服务器突然断电导致ntpd服务宕机，CDH全部宕机，重启后发现一直有一个错误就是 NTP时钟偏差 首次尝试在服务器上开启NTPD服务，但是CDH依旧报错， NTP时钟偏差 解决办法： 1、重启CDH - agent 服务 service cloudera-scm-agent restart 2、再重启NTPD服务 service ntpd restart 3、等待几分钟 4、可以使用ntpd进行状态的查看，主要i判别是否启动 ntpdc -c loopinfo WatchDog Timer.
CM&CDH安装
Jin__nan的博客
07-14 3417
笔者当时自己装CM&CDH看了不下10篇博客，重装集群不下3次，后来快照这个功能深深的刻在了我的心里。这篇博客笔者呕心沥血啊。。。不过还是会有同学会挂掉，所以希望大家做到那里一步记得快照。。。。 发一下牢骚。。。 CM&CDH安装需要的准备事项： 1、Cloudera Manager安装包（rpm包） 2、CDH的安装包 3、集群 就这俩个，有的博客还介绍到要用到m...
CDH6.2.1搭建（史上最全的安装教程）
热门推荐
summer089089的博客
07-27 1万+
1.Cloudera Manager 1.1 CM简介 1.1.1 CM简介 Cloudera Manager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具，使得安装集群从几天的时间缩短在几个小时内，运维人员从数十人降低到几人以内，极大的提高集群管理的效率。 1.1.2 CM架构 1.2 CM部署准备配置 1.2.1 修改hosts文件 [root@node01 ~]# vim /etc/hosts 127.0.0.1 localhost localhost ::1 loc
CDH集群大数据hadoop报错解决办法及思路整理-绝对干货
12-22
CDH集群大数据hadoop报错解决办法及思路整理，主要解决大数据在运行过程中所遇到的问题，相关解决办法都是实践验证过。
CDH主机运行状况。此角色的主机的运行状况为不良。 以下运行状况测试不良： 时钟偏差.
qq_43689775的博客
05-29 1352
CDH报错
CDH 时钟偏差，无法找到主机的 NTP 服务
java之书-资源
04-15 488
CDH 时钟偏差不良，NTP服务
CDH时钟偏差警报
大神带我来搬砖
12-13 3951
安装了Cloudera之后,总是提示时钟偏差,但是ntpd服务是正常工作的. 原来Cloudera的agent是使用ntpdc命令进行进行判定的 [url]https://community.cloudera.com/t5/Cloudera-Manager-Installation/Cloudera-5-4-x-cluster-randomly-reports-quot-Clock-Offse...
记一次CDH集群 无法找到主机的NTP 服务,或该服务未响应时钟偏差请求
激进的蜗牛
12-09 5449
为了单纯来看问题怎么解决的伙伴,先给出解决方法:重启agent 解决过程如下 CDH的NTP服务报错是很常见的问题.一般情况下,出现无法找到主机的NTP服务,或该服务未响应时钟偏差请求错误都是因为NTP服务异常,可以运行systemctl status ntpd查看NTP进程,执行systemctl restart ntpd 可重启该进程. 最近集群出现类似错误,报错如标题,...
Cloudera 主机时钟偏差完美解决方案
h952520296的博客
06-02 3365
CDH 集群需要保持各节点时间同步，需要在每个节点配置 NTP 时间同步服务 1、集群配置 NTP 主从时间同步服务 安装 NTP yum install -y ntp 配置 /etc/ntp.conf 参数ntp 时钟服务节点：在集群中配置一个 ntp 时间服务器，负责对内网其它节点提供时钟服务。 配置参数说明如下，完整配置脚本见清单中的 server-ntp.conf ： # 设置对内网主机提供NTP服务，集群网关是192.168.20.1，允许内网其他机器同步时间 rest...
CDH 5 时钟服务器配置
Aitu的博客
12-01 4367
不得不说 CDH版本的hadoop 虽然再安装上提供了方便，但是在前期的准备工作上得做足充分的准备，才能保证你安装 的集群不出问题。因工作需要，最近一直也在研究CDH,在诸多尝试之后终于安装成功了。由于自己一时的苟且偷懒，遗留了一些小问题，就是时钟服务器的问题。装过CM的都知道，在安装CM 的时候，有一个时钟检查，这项不通过，你是无法进行下去的，当时偷懒，未设置ntp 服务器配置，只是简单的将所有
cloudera-manager所有服务提示时钟偏差问题解决办法
weixin_34262482的博客
01-11 1106
今天新部署Cloudera Manager Hadoop(CDH)集群 发现祖国江山一片红，所有服务都报时钟偏差 1、查看各服务器，时钟是否正确 　　发现并无问题 2、查看CDH主机配置————主机时钟偏差阈值 尼玛，这个默认值警告是2s，严重是10s，仔细查看界面后面的描述如下： 这是主机运行状况测试，用于检查主机的系统时钟是否与其 NTP 服务器不同步。该测试能检查“ntpdc -...
cdh时钟同步异常解决
qq_40796888的博客
09-19 349
服务未响应始终偏差
CM5 & CDH5 离线安装教程
"CM5 CDH5离线安装的详细步骤" 在本文中，我们将深入探讨如何在CentOS 6.4或6.5系统上离线安装Cloudera Manager (CM) 5和CDH5。离线安装适用于没有稳定互联网连接的环境，通过预先下载所需的安装包和依赖项来实现。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值