[异常]记一次磁盘io非正常飙升问题

收到告警可用内存小于1G
研发反馈sql执行慢
查看监控大盘发现对应时间点磁盘io飙升,cpu 网口流量均正常 排除被攻击的可能性
使用ps auxw --sort=rss 排序内存占用查看占用资源前四日志没有发现程序异常
查看messages发现内存oom
Nov 16 09:12:52 newbb-qscd-47 kernel: Out of memory: Kill process 11081 (vim) score 346 or sacrifice child
Nov 16 09:12:52 newbb-qscd-47 kernel: Killed process 11081 (vim) total-vm:5953828kB, anon-rss:5804960kB, file-rss:112kB, shmem-rss:0kB

因为运维没有写过vim的定时任务和脚本所以查看对应时间等登录服务器信息
查看 secure登录日志
Nov 16 09:09:40 newbb-qscd-47 sshd[10818]: Accepted publickey for root from 47.115.95.xx port 4xxx ssh2: RSA SHA256:0bMxxxxxxxx81sNYvVc6MiR2xxxxxxxxxx

经查询是研发同学对一个大日志文件执行了vim 导致内存打满内核自动kill掉vim进程

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值