高并发下CURL请求缓慢原因及解决方…

在实现一个内部服务时,发现在100高并发下,每秒仅能处理8个CURL请求,而单进程可达400请求。问题定位到php-fpm,发现其被限制了文件打开数。解决方案是调整php-fpm配置(rlimit_files至65535)和Linux系统限制(nofile软硬限制至51200),并增大max_children数量。通过这些调整,解决了并发性能问题。
摘要由CSDN通过智能技术生成
这几天在做一个对内的服务:

由一个封装好的类发送curl请求到接收端,接收端收到鉴权后入到队列内。

开发完毕后自己使用php单进程能够达到每秒400左右请求。

但是使用ab、loadrunner,100高并发的时候发现每秒只能处理8个请求。

而并发在10个的时候一切正常

经过测试发现当发送端和接收端都在同一台服务器的时候会有这个现象。

起初怀疑是curl有问题,几次尝试无果。

又通过写性能日志进行排查,发现php客户端处curl执行时间很长(平均8秒处理完一个),响应端代码实际处理时间很短。

而用top命令发现php-fpm进程启动很少,只有10几个每秒

百思不得其解……

后来单步调试逐步将注意力从curl上转到nginx及php-fpm上,首先觉得nginx肯定没问题,后来转移到php-fpm上,发现curl请求虽然过去,但是php-fpm好像被限制住,启动很多链接接口但是就是不处理一直在等待。

查看linux load正常

中午吃饭前四处搜索了下优化相关信息

突然发现linux下最大文件打开数的提示

悲催啊,终于找到原因在哪里了

php-fpm自己限制了进程可以打开文件个数,linux下也对最大打开
  • 1
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值