记一次服务器负载飙高排查过程

最新推荐文章于 2024-03-01 18:02:40 发布
最新推荐文章于 2024-03-01 18:02:40 发布
阅读量937 收藏 5
点赞数 1
文章标签： 运维 linux cpu 服务器 内存泄漏
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/dongroot/article/details/115708946
版权

记一次服务器负载飙高排查过程

问题描述

在前天呢，我们公司的三台部署着php项目的线上服务器A、B、C，其中一台服务器A出现了CPU负载飙高，与其他两台服务器相差好几倍，并且在前天之前都没有出现过这么高的情况，所以需要针对问题进行排查
A服务器负载异常第一天
A服务负载异常第二天

排查过程

首先第一件事，找日志，看看异常的时候到底在干什么，找到服务器top日志，找到对应负载上升和下降的连续时间的日志（下面截图已做处理）
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
上面三个截图对应的是第一个负载图顶点附近的日志，可以看到，28688这个进程占用了大量的CPU

继续查看日志，A服务器在第二天负载突增的时间点，也是这个28688，截图我就不放了，那看起来就是这个进程的原因？

遗憾的是，这个28688的进程是一个监控程序，运维在几天之前就已经部署在好些个服务器上了，且别的服务器都没有出问题，所以当时推测，这个监控程序之所以CPU使用率高，是受别的进程影响导致的

那如果不是这个进程，剩下的一些高CPU的进程都是php的定时执行脚本和一些用户请求，难道是用户量增加导致的负载变高？也不是&

最低0.47元/天 解锁文章
ye_xiao_dong
关注
php-fpm进程占用CPU过高| php-cgi进程过多
蚁人日记
05-25 1万+
公司服务器CPU占用过高，报警了，第一反应是登录服务器，top 命令查看当前进程，再输入 P 按cpu排序： 果然看到有多个php-fmp进程占用cpu过高，都达到100%了 于是打算监听一下进程，看看在执行什么操作，使用strace 命令： #监听进程 strace -o /tmp/output.txt -T -tt -F -e trace=all -p 7757 #查看log tail -f /tmp/output.txt 结...
关于服务器负载过高排查
qq_42727102的博客
06-23 1423
背景：在公司沙箱环境下，top~，发现一个命令占用 cpu 接近 100% 排查： top：得到哪个命令占 cpu 高 ps -ef | grep “xxx” 筛选出这个命令，得到其进程号 top -p 定位到此进程的线程 pstack 进程号 | grep 线程号 定位问题所在 最后：排查出来是后台代码问题~~mq无数据，重复取 ...
php-cgi进程占用cpu资源过多负载高的原因分析及解决步骤
老张的自言自语
01-14 2843
服务器环境：redhat linux 5.5 , nginx ,  phpfastcgi   在此环境下，一般php-cgi运行是非常稳定的，但也遇到过php-cgi占用太多cpu资源而导致服务器响应过慢，我所遇到的php-cgi进程占用cpu资源过多的原因有：   1. 一些php的扩展与php版本兼容存在问题，实践证明 eAccelerater与某些php版本兼容存在问题，具体表现时启...
Linux服务器中高负载现象故障排查指南
jiangjunlanzhoulan的博客
08-01 529
服务器高负载因何而起？ 下列项目的过度使用会直接导致高负载问题： CPU 内存（包括虚拟内存） 磁盘I/O 该如何检查这些项目？ 这取决于大家是要审查当前资源使用情况还是历史资源使用情况。当然，在本文中我们将从这两方面进行探讨。 关于sar的简要说明 历史资源使用情况可通过sar工具查看，该工具在默认情况下应该通过sysstat软件包安装在所有cPanel服务器当中。只要通过cron...
服务器负载分析及问题排查
醒 木
11-08 2651
序言 平常的工作中，在衡量服务器的性能时，经常会涉及到几个指标，load、cpu、mem、qps、rt等。每个指标都有其独特的意义，很多时候在线上出现问题时，往往会伴随着某些指标的异常。大部分情况下，在问题发生之前，某些指标就会提前有异常显示。 对于这些指标的理解和查看、异常解决等，是程序员们重要的必备技能。本文，主要来介绍一下一个比较重要的指标——机器负载（Load），主要涉及负载的定义、查看负载方式、负载飙高排查思路等。 什么是负载 In UNIX computing, the system load
一次因Java应用造成CPU过高的排查实践过程
08-26
本文将深入探讨一次由于Java应用导致CPU占用过高的排查实践过程。 首先，当发现应用CPU使用率异常时，第一步是确认是否真的是计算密集型任务导致的。在大多数情况下，CPU高负荷往往是由于程序中的逻辑错误，如死...
一次详尽的问题定位记录：CPU使用率低负载高的排查过程
qianlia的博客
06-02 3383
历史原因，当前有一个服务专门用于处理mq消息，mq使用的阿里云rocketmq，sdk版本1.2.6（2016年）。 随着业务的发展，该应用上的consumer越来越多，接近200+，导致该应用所在的ecs长时间load高，频繁报警。 现象分析 该应用所在的ecs服务器load长期飙高（该ecs上只有一个服务），但cpu、io、内存等资源利用率较低，系统负载参考下图： ECS配置：4核8G 物理cpu个数=4 单个物理CPU中核（core）的个数=1 单核多处理器 在系统负荷方面，多核CPU与多CPU效
记一次Dubbo超时&CPU高负载问题排查
jiajun2905的博客
05-04 2144
记一次Dubbo超时&CPU高负载问题排查 1.问题背景 最近经常有同事反馈我们灰度环境老的交易系统，这里简称trade，dubbo消费者调用其他服务超时，因为该项目维护人员众多，加上灰度环境发布较多，一直没有排查，然后五一前再次有同事反馈这个问题，刚好有空就准备分析一下引起超时的原因。 2.问题排查 2-1 问题描述 大量Dubbo服务调用超时 2-2 问题排查 查看日志（上图）发现du...
服务器cpu负载过高问题排查
工匠解码
08-30 5268
第一步 ：执行top命令，查出当前机器线程情况top - 09:14:36 up 146 days, 20:24, 1 user, load average: 0.31, 0.37, 0.45 Tasks: 338 total, 1 running, 337 sleeping, 0 stopped, 0 zombie Cpu(s): 0.4%us, 0.4%sy, 0.0%ni
线上服务 CPU 负载过高问题排查
Senn · 森
10-12 1416
CPU 负载过高，在开发过程中每个人都或多或少遇到，在系统未部署正式环境时，看日志或打断点总会有办法解决掉。但总有些BUG的出现会给你意外惊喜，即使已在测试环境做了尽可能多的测试，依旧无法避免，其中有一种就是服务器CUP突然异常负载过高。本文重点叙述在线上环境排查该问题思路。 定位问题服务 CPU 负载过高，给用户的直观感受就是服务卡顿，响应时间边长，甚至严重一点整个服务网页崩溃，无法工作。特别是我们目前基于容器的部署并没有设置容器最大可用CPU数，整个服务器也没有部署系统资源监控时，这种问题一旦发生，就会
如果发现服务器负载压力大可以看以下的日志
weixin_33898233的博客
05-11 174
/var/log/btmp 记录错误的登陆尝试，执行lastb命令或者 last -f /var/log/btmp 查看不成功的登陆尝试。/var/log/utmp 登陆和退出记录 由last 命令读取。即 last | less /var/run/utmp 记录当前登陆进系统的各个用户， 由who 命令读取。/var/log/secure ： linux 系统的安全日志， 记录用户登陆...
linux php 内存高 排查,查找linux下进程占用CPU过高的原因，以php-fpm为例
weixin_39831039的博客
03-09 690
很多时候，线上服务器的进程在某时间段内长时间占用CPU过高，为了优化，我们需要找出原因。1、找出占用CPU最高的10个进程ps aux | sort -k3nr | head -n 10或查看占用内存最高的10个进程ps aux | sort -k4nr | head -n 10或者使用 top ，按 1 显示CPU列表，再按 shift+p 以CPU排序top2、对进程进行跟踪查看查看进程打开的...
Linux高负载排查最佳实践
最新发布
小胡子
03-01 893
Linux高负载排查最佳实践
服务器负载过高怎么办？如何处理？
oldboyedu1的博客
02-21 1671
在日常工作中，很多人都遇到过服务器很卡的情况，而当出现服务器很卡的情况一般都是我们的服务器负载过高导致的。3、CPU负载过高情况一般是程序出现异常或者数据访问量过大导致，如果正常情况下负载过大应考虑更高核心的CPU进行升级配置。1、针对带宽不足的情况我们可以增加带宽，如果带宽足够，是因为服务器被攻击的情况，建议可以使用软件进行应对。2、内存不足：运行的程序或者数据库可能太大，我们的服务器太小，都可能导致我们内存不足使得服务器卡顿。4、硬盘满了：硬盘满了会导致服务器卡死，可能连远程连接都无法登录。
php 负载100%,记一次优化网站：负载100%怎么办？
weixin_30605469的博客
04-02 432
经常有站长在我们东坡网的群里问网站cpu100%怎么办，网站速度慢怎么办，一直想写篇文章教大家，但不得空。这几天刚好有一位站长也为此困扰，我帮他优化了一下，效果良好，这里记录一下一下优化过程，给有需要的站长参考。这位站长的网站基本情况是这样的：服务器上有2个网站，总IP3w，PV约30w，8核16G，带宽不详，宝塔面板，lamp。最近几天网站网站大部分时间处于负载100%情况。接到任务后，就拿到了...
服务器CPU占用率过高检查步骤
mangomango123的博客
08-17 296
1、病号是谁？（WHO） - 第一步：采用 top 命令，找出 CPU 占用最高的病号 PID ； - 第二步：通过 ps -ef | grep PID 查看病号对应的真实身份。 2、病号哪里出了问题？（WHERE） - 第一步：采用 jstack -l PID >> PID.log 获取病号的各器官信息的病历单； - 第二步：采用 top -Hp PID 拿到占用 CPU 最高的器官昵称 PID ; - 第三步：采用 printf "%x\n" ...
linux php 内存高 排查,解决Linux中PHP-FPM进程过量占用内存
weixin_33554776的博客
03-09 790
1. 事情经过其实这个问题困扰了我很长时间。事情经过是这样的：我在写这篇文章前几天，对网站服务器进行了停机维护，其中包括更换操作系统、重新配置网站环境、更换博客程序、使用新模板等许多操作(包括误删数据库并没有)。然后问题就出现了！内存多次跑满(如图)！由于我在服务器商处设置了内存超量报警，导致收到了几十条报警信息。由于我这几天有些事情(因为懒并不是)，没有认真打理网站，所以只是确定服务器未被入侵后...
服务器负载率特别的高 我该怎么排查问题
06-10
服务器负载率高可能是由于多种原因引起的，您可以按照以下步骤进行排查： 1. 查看系统负载情况：使用命令 "top" 或 "htop" 查看系统负载情况，观察 CPU 利用率、内存使用情况、磁盘 I/O 等指标，确定服务器的瓶颈...
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值