Ambari进程无故挂掉的问题

测试环境的Ambari进程老是无关无故挂掉,看程序日志也什么都看不出。

查看/var/log/messages日志文件,发现如下日志:

Out of memory: Kill process 31960 (java) score 32 or sacrifice child
Killed process 31960 (java) total-vm:8276748kB, anon-rss:1085284kB, file-rss:0kB, shmem-rss:0kB
java invoked oom-killer: gfp_mask=0x201da, order=0, oom_score_adj=0
java cpuset=/ mems_allowed=0
CPU: 7 PID: 8580 Comm: java Kdump: loaded Not tainted 3.10.0-862.el7.x86_64 #1
Hardware name: VMware, Inc. VMware Virtual Platform/440BX Desktop Reference Platform, BIOS 6.00 07/28/2017

然后查看 /var/run/ambari-server/ambari-server.pid文件,ambari的进程id也正好是31960 。

看起来是系统内存不足导致内核直接杀进程了。
参考文章:https://blog.csdn.net/whatday/article/details/107845356

然后看了下这台机确实部署的东西有点多:除了ambari server,ResouceManame、NodeManager、DataNode、zk等,还有MySQL,都在这台机上。

查看监控,ambari挂掉的这个时间段,cpu使用都到100%了
看yarn的日志,这个时间点好多任务在执行
先把这台机NodeManager关掉,再观察几天还会不会挂

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值