【PHP】nginx下file_get_contents导致cpu 100%的问题

最新推荐文章于 2024-07-23 07:14:35 发布
最新推荐文章于 2024-07-23 07:14:35 发布
阅读量1w 收藏 2
点赞数 1
分类专栏： PHP web性能优化 文章标签： php nginx file_get_contens
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ohmygirl/article/details/18844987
版权
线上服务器出现nginx 502和504错误，CPU达到100%。经排查，发现file_get_contents在调用搜索接口时未设置超时，导致资源占用。解决方案是使用curl替代file_get_contents，设置超时限制并增加重试机制，降低502错误的发生。同时建议线上业务避免使用可能导致问题的函数，提高容错性。
摘要由CSDN通过智能技术生成

昨天早上，线上主站点（nginx + fastcgi）大图详情页面打开缓慢，出现了很多502和504的错误，且服务器压力过大，几乎处于拒绝服务状态。Top命令查看服务器的资源使用情况，发现cpu飙升到100%且持续1-2分钟居高不下。而且，打开nginx的错误日志，发现有很多请求都是如下的状态：


由于大图详情页面并没有需要消耗cpu资源的计算，只有获取图片信息和相关推荐及评论的逻辑，因而起初怀疑是nginx配置导致的问题。后来发现，只有在某些情况下会出现这样的问题。无奈之下，只好对各个模块的请求时间记录并通过error_log将统计信息记录到文件。三个小时之后，打开统计文件，发现其中一个模块的加载时间极不稳定，有时甚至会操过120s，这显然是造成nginx 502错误的原因之一。Check相应的代码发现，对搜索接口的调用，是直接通过file_get_contents(API)的方式获取的。由于file_get_contents是阻塞的I/O方式，且默认没有设置超时，因而如果搜索接口在长时间没有返回数据的情况下，会一直占用系统的资源，从而导致了nginx的502 bad gateway错误。张宴的博客中，对这一现象做了详细的解释和描述（地址：http://blog.s135.com/file_get_contents/

最低0.47元/天 解锁文章
ohmygirl
关注
专栏目录
nginx的worker进程挂起且某个CPU负载达到100%
weixin_33932129的博客
07-31 2206
2019独角兽企业重金招聘Python工程师标准>>> ...
记一次Nginx服务器CPU100%故障
祈雨v的博客
11-29 6万+
描述 周五请假外出，突然收到监控报警提示Nginx服务器的CPU使用率100%，另外用户也反应服务不可用，同事登录服务器后发现Nginx的进程的CPU使用率100%，且后端应用有大量的服务调用网络超时。 由于Nginx的访问日志并没有被收集到日志分析的Elasticsearch中，所以无法第一时间通过日志分析来统计出访问异常的资源。故障发生半小时后，服务器自动恢复正常，后端应用也不再有网络超时报错了，云服务器的CPU监控和网络监控如下图： 分析 看到Nginx应用占用CPU100%时，第一反应是Ng
当 Nginx 出现 CPU 使用率过高，如何解决？
最新发布
2401_86074221的博客
07-23 1215
Nginx CPU 使用率过高就像是一场暴风雨，会给我们的网站和应用带来不小的麻烦。但只要我们能够冷静分析，找出问题的根源，对症下药，就一定能够化解危机。同时，我们也要不断地学习和探索，跟上技术的发展步伐，让 Nginx 这头“老黄牛”能够更加健壮、高效地为我们服务。🎉相关推荐🍅关注博主🎗️带你畅游技术世界，不错过每一次成长机会！📘Nginx 技术专栏🍅CSDN-技术社区。
用nginx解决confluence，pojie后cpu使用率100%方案
czyfengye的博客
07-25 2506
删除confluence用户定时任务 ，查看目录 /var/spool/cron下是否有confluence用户的job，确认并删除。重启confluence ： /opt/atlassian/confluence/bin/stop-confluence.sh。删除/opt/atlassian/confluence/temp目录下confluence用户创建的所有目录和文件。文件位置 /opt/atlassian/confluence/conf/server.xml，添加代理配置。nginx 增加配置。
nginx cpu高排查
weixin_34187862的博客
08-28 4042
首先查看nginx的error日志，无异常打印。 cpu占用如下图所示： top - 10:05:40 up 233 days, 16:28, 4 users, load average: 25.53, 25.39, 21.62Tasks: 836 total, 20 running, 816 sleeping, 0 stopped, 0 zombieCpu(s): 51.8%us,...
file_get_contents 报错 warning
yuzeiger的专栏
05-18 5802
php.ini  配置修改3个地方extension=php_openssl.dllallow_url_include = Onallow_url_fopen = On
PHP-CGI进程CPU 100% 与 file_get_contents 函数的关系分析
10-28
在描述的问题中，服务器的CPU负载增加，`php-cgi`进程的CPU使用率达到100%，通常是由`file_get_contents()`长时间等待远程响应而引起的。`file_get_contents()`函数在处理HTTP请求时，并不会受到`php.ini`配置文件中...
PHP file_get_contents函数读取远程数据超时的解决方法
12-18
然而，在网络环境不稳定或目标服务器响应慢的情况下，`file_get_contents` 很可能会遇到读取远程数据超时的问题。这可能导致脚本执行中断，影响程序的正常运行。为了解决这一问题，我们可以采取一些策略来优化`file_...
解决file_get_contents无法请求https连接的方法
10-26
在PHP编程中，`file_get_contents` 是一个非常实用的函数，可以用来读取本地或远程文件内容。然而，当尝试使用 `file_get_contents` 函数读取HTTPS（安全的HTTP）连接时，可能会遇到一些问题。这主要是由于PHP默认...
使用file_get_contents()和curl()抓取网络资源的效率对比
weixin_30555753的博客
04-17 92
使用file_get_contents()和curl()抓取网络资源的效率对比 在将小程序用户头像合成海报的时候，用到了抓取用户头像对应的网络资源，那么抓取方式有很多，比如 file_get_contents，curl等，如何抓取就成了问题，下面主要是对比这两种方式的效率快慢问题 1 echo '开始时间为：'.time().'<br>'; 2 $img_file = fil...
宝塔负载和CPU占100%问题
玩杰的博客
06-09 904
今天在腾讯云买了一台服务器，拿来建站用的。 傻瓜式的安装宝塔面板，环境安装了Nginx相关的。 于是发现 安装Nginx的时候服务器负载和CPU都是飙到100% 安装完Nginx环境之后，基本都是卡死的状态，我于是我安装了好多遍，终于找到问题所在。。。 首先远程登录到服务器命令行 输入 top 可以看到cpu都是Nginx占了。 虽然看到才有2%，但是控制台是很卡顿的。基本没法操作。 于是针对 Nginx问题，我首先把Nginx停止了。然后发现真的不卡。。。… 接着我试着更换Nginx版本Nginx1
nginx服务占用百分之百
热门推荐
林子懿0509
11-08 7万+
一、当nginx达到100%时，也就是服务器负载突然上升。 (1)利用top命令查看cpu使用率较高的php-cgi进程  PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND 10747 www 18 0 360m 22m 12m R 100.6 0.3 0:02.60 php-cgi 10709 www 16 0 359m 28m
为什么nginx主机的io使用率会100%？
BUG_zhentan的博客
07-05 1887
起因 有业务反馈构建容器镜像失败，查看代理日志和监控发现 4xx、5xx 响应码有增长，起初怀疑是后端服务响应慢，排查后没有发现异常，然后发现了 nginx 主机的 io 很高，iostat 看utilization 到 100%，iotop 查看只有 nginx 在大量写磁盘，第一反应是 proxy buffer 落盘了 基本信息 我们的镜像仓库共有新旧两套，通过 nginx 上配置的规则做转发，主 nginx001/002 是万兆网卡，此时两台主机都出现了 io 爆满的情况，备用 nginx
PHP函数file_get_contents与操作系统的内存映射
aben_sky的专栏
06-22 276
内存映射，英文是 memory mapping ，即 将一个文件或者其它对象映射到进程的地址空间，实现文件磁盘地址和...
nginx CPU 100 跑满问题定位
长门有希的博客
02-03 2万+
3 单个CPU占用100%原因的定位，开启了gzip，并且上传了一个大的文件，nginx的gzip默认只能使用单核来压缩和解压缩。2 确定是不是开启了gzip压缩，确定压缩等级，小于1kb的不要压缩；图片，大文件，大压缩文件等不要压缩。1 确定连接数是不是达到了上限。
php的file_get_contents优化
weixin_30273175的博客
11-17 135
不同的二级域名传递数据有webservice 或直接file_get_contents，对，就这个函数导致访问页面灰常慢。 星期一大早，可不可以修改为localhost呢？ 灵机一动，果断开启nginx新端口。解析Localhost。 一刹那，速度有飞起来了。 转载于:https://www.cnblogs.com/puminghua/p/4103418.html...
服务器cpu一直处于100%解决思路
惠惠软件
11-22 2443
网友截图咨询：cpu一直处于100%，请问是什么原因所致？突然出现的，从昨天14点左右就这样子，服务器很卡，将所有网站，web服务，mysql服务，防火墙都停止了，
php file_get_contents 阻塞,PHP file_get_contents设置超时处理方法
weixin_31574891的博客
03-11 364
file_get_contents的超时处理话说，从PHP5开始，file_get_content已经支持context了(手册上写着：5.0.0 Added the context support. )，也就是说，从5.0开始，file_get_contents其实也可以POST数据。今天说的这篇是讲超时的，确实在跨服务器提交的时候，不可避免的会遇到超时的情况，这个时候怎么办？set_time_...
php nginx 远程图片下载怎么解决
07-12
在 PHP 中通过 Nginx 下载远程图片，可以使用 `file_get_contents` 函数结合 Nginx 的 `proxy_pass` 配置来实现。以下是一种基本的解决方案： 1. 首先，确保你的 Nginx 服务器已经正确配置了反向代理（proxy）功能。例如，你可以在 Nginx 配置文件中添加以下代理配置： ``` location /remote-image { proxy_pass http://example.com/path/to/remote-image; } ``` 上面的配置将把 `/remote-image` 请求代理到 `http://example.com/path/to/remote-image` 地址。 2. 在 PHP 中使用 `file_get_contents` 函数来获取远程图片。以下是一个示例代码： ```php $remoteImageUrl = 'http://your-nginx-server/remote-image'; $imageData = file_get_contents($remoteImageUrl); ``` 在这个示例中，我们将远程图片的 URL 设置为 Nginx 反向代理的地址。 3. 如果需要保存远程图片到本地，可以使用 `file_put_contents` 函数将图片数据保存到指定路径： ```php $localImagePath = 'path/to/save/image.jpg'; file_put_contents($localImagePath, $imageData); ``` 请确保保存路径有写入权限。 通过以上步骤，你可以使用 PHP 和 Nginx 实现远程图片下载功能。注意，这里我们使用 Nginx 的反向代理功能来代理请求，以避免跨域问题。同时，请确保你的 Nginx 服务器已经正确配置了反向代理，并且远程图片的 URL 能够被 Nginx 访问到。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值