亲身经历的curl请求慢的原因

最新推荐文章于 2024-06-16 12:03:57 发布
最新推荐文章于 2024-06-16 12:03:57 发布
阅读量1.2w 收藏 7
点赞数 5
分类专栏： php 文章标签： php
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/gongqinglin/article/details/121625214
版权

不要以为我文字少就不精华，网上说一大堆都说不到重点的有啥用。

1、dns不稳定导致请求慢
解决方案一：更换dns

全国通用DNS地址
首先DNS服务器地址：114.114.114.114
备用DNS服务器地址：114.114.115.115

全球通用DNS地址
首选DNS服务器地址：8.8.8.8
备用DNS服务器地址：8.8.4.4

解决方案二：不更换dns的情况下，可以把curl的请求直接指定ip，这样就不会解析ip导致慢

2、curl高并发或太多curl请求导致的，导致一直loading不处理
这种情况可能是php-fpm限制了
php-fpm自己限制了进程可以打开文件个数
linux下也对最大打开文件个数进行了限制

Linux系统命令：
ulimit -n 查看当前最大打开文件句柄个数
ulimit -HSn 65536 增加系统打开文件句柄个数

更多解决方法自己去找吧，反正是这个方向

每天都进步一点点
关注
专栏目录
本地测试 php curl 请求为什么会慢
JineD的博客
08-01 9326
本地开发接口时，有时候会curl请求同一个站点进行测试，这个时候会非常慢甚至504，主要原因是因为本地只启用了一个cgi进行web请求处理，curl时占用了cgi进程，被curl的请求一直在等待curl处理完毕，而curl请求一直在等待信息返回，从而造成了“死锁”现象。 解决方案： 一、从php-cli发出请求，如 php curl.php 二、再开一个cgi，window下开启cgi ：.\php-cgi.exe -b 127.0.0.1:9001 -c .\php.ini ...
CentOS6--优化服务器网络访问速度，关闭IPV6：解决CURL慢的问题
10-10 4997
Author：Fu 优化服务器网络访问速度：解决CURL慢的问题-关闭IPV6支持。 现象：CURL请求URL地址，速度都在5秒以上。 说明： 在使用curl获取某接口时会curl: (6) Couldn’t resolve host ‘www.coolnull.com’。奇葩的是ping www.coolnull.com域名是通的。上网搜了下。 在CentOS6系统下，
记录一下自己使用curl下载速度慢的问题
最新发布
weixin_43752948的博客
06-16 1115
今天在使用curl下载raw.githubusercontent.com慢不活了，所以找了很多方法，总结一下。
curl 慢 不稳定_你看到的不一定是真的
weixin_40005437的博客
12-10 1177
小伙伴们大家好，双十一刚过，你的手还在吗?当大家在双十一的深夜买买买的时候，各大电商平台背后的技术人员都在紧张地盯着服务器的各项技术参数，一旦发生故障，必须快速响应，第一时间恢复业务。平时，业务发生故障，无法访问也时常发生。阿里的地下光缆就被挖掘机失误挖断过。有些时候，当我们排查各类网络相关的业务故障的时候，会发现最终的原因与最开始的现象是看似没有关系的，斗笠菌作为一名在技术支持行业摸...
php curl 函数请求特别慢，并且不能请求成功
qq_36957701的博客
01-16 744
php curl 函数不能使用
PHPcurl请求很慢解决办法
weixin_42475906的博客
01-20 2740
在使用curl做POST的时候, 当要POST的数据大于1024字节的时候, curl并不会直接就发起POST请求, 而是会分为俩步, 1. 发送一个请求, 包含一个Expect:100-continue, 询问Server使用愿意接受数据 2. 接收到Server返回的100-continue应答以后, 才把数据POST给Server 结局办法就是 curl_setopt($ch, CURLOPT_HTTPHEADER, array('Expect:')); ...
php 多个curl 很慢,PHP下CURL异常慢
weixin_39850787的博客
03-10 624
几个星期前，碰到一个特别头疼的问题，各种办法，原因都想过，排查过，就是找不到原因。就是PHP,在使用其他域名接口的时候,非常慢。可能问题出现在:目标服务器响应慢和服务器建立连接慢首先，我们需要排除掉目标服务器是否慢，这很简单，找另外的机子去访问同样的接口，或者找目标服务器人员排查。这个不是我们这次的重点。其次，来分析分析第二个问题。一件一件排查。先列出可能原因：IP路由不通(ping 目标IP排查...
用浏览器访问网站很快，但是用curl命令行访问却很慢
sdcxyz的专栏
11-16 1万+
这几天遇到一个问题 问题的症状是这样的 打开一个网站，用浏览器打开非常快，但是用命令行的curl或者使用python脚本来访问却非常慢 用charles抓包访问了一下发现时间全花在了dns上 接着我就试着修改/etc/hosts文件，无效,虽然访问最终用了hosts文件里面写的ip,但是时间依然浪费在了dns查询上面 清理dns缓存  无效 但是，我通过修改http请求的Host字段，并
php curl批量请求url
02-26
批量请求的关键在于创建一个循环，依次对每个URL执行cURL操作。以下是一个简单的`batch.php`示例，展示了如何使用cURL批量请求URL： ```php // 定义URL数组 $urls = [ 'http://example1.com', '...
curl2axios:一个将curl请求转换为Node.js axios请求的小实用程序
05-05
curl2axios是一款针对JavaScript开发者的小型实用工具，它的主要功能是将curl命令转换为Node.js环境下的axios请求。curl是一种在命令行中执行HTTP请求的强大工具，而axios则是Node.js和浏览器中广泛使用的异步HTTP库...
PHP中的使用curl发送请求（GET请求和POST请求）
01-21
使用CURL发送请求的基本流程 使用CURL的PHP扩展完成一个HTTP请求的发送一般有以下几个步骤： 1.初始化连接句柄； 2.设置CURL选项； 3.执行并获取结果； 4.释放VURL连接句柄。 下面的程序片段是使用CURL发送HTTP...
curlAction.class_oracle_phpCURL请求类_
09-29
- GET 请求：通过设置 `CURLOPT_URL` 选项，`cURL` 将自动执行 GET 请求。 - POST 请求：设置 `CURLOPT_POST` 为 `true`，并使用 `CURLOPT_POSTFIELDS` 传递数据。 - 处理响应：`curl_exec()` 返回的响应数据可以...
curl模拟浏览器请求
彳亍
04-10 7788
自行封装一个curl模拟浏览器请求的函数，如下： /**  * curl模拟浏览器请求  * @param unknown $url        请求的地址  * @param array $params        请求地址所需要的参数  * @param string $method     请求的类型  * @param array $headers    http请求头
解决虚拟机curl请求慢的问题
赵阳的博客
06-18 5595
不管是代码里发起的请求还是通过curl命令请求都很慢，比如运行 time curl http://www.baidu.com 时间大概是5秒多，非常慢，这是因为ipv4和ipv6冲突了，解决办法如下： vim /etc/resolv.conf #写入 options single-request-reopen 再次发起请求，时间大概是0.1s ...
curl访问部署在境外服务器上的接口速度很慢怎么办?
风柏杨的技术博客
07-21 598
前两天为客户交付了优订货裸钻订货系统后, 客户又增加了一个新需求：是为他对接一间来自新加坡的上游钻石供应商的接口, 以实现钻石数据自动同步的目的，这样就能免去每天上传钻石数据的麻烦，数据同步及时无偏差，而且能自动完成一些字段值的转换，例如自动将RD转为圆形，解决有些数据表述习惯不一致的问题。 本来这个需求挺简单的，但在一开始就遇到问题，就是在浏览器中访问上游供应商提供的接口时，速度很正常，但一旦在开发环境（用的腾讯云服务器）用curl访问，就会变得很卡顿，很慢，刚开始以为是接口提供方做了什么防爬虫的机制，后
php的curl函数模拟post数据提交，首次速度非常慢的处理办法
hzbigdog的专栏
08-16 1万+
如果你用 curl_setopt 函数来与远程的webservice或者抓取页面的处理时，有时会遇到很奇怪的现象，首次访问的速度异常的慢，基本上要5s-10s的时间让人奔溃。 但是怎么查也差不出问题出在哪儿，最近发现一个文章写了处理这个问题的方式。 先从解决问题入手： curl_setopt($ch, CURLOPT_HTTP_VERSION, CURL_HTTP_VERSION_1_0);
php使用multicurl变慢,php - php-fpm慢日志：curl_multi_select耗时10秒 - 堆栈内存溢出
weixin_39693971的博客
03-12 237
我有一个奇怪的问题。 在具有nginx和php-fpm的亚马逊m4.large上，它位于负载平衡器之后，并且当访问者达到一定数量时具有memcached和s3存储桶，该实例的CPU在很短的时间内命中率接近97％。 我启用了php-fpm的慢速日志记录功能，并发现了以下多次出现：script_filename = /var/www/xxx/web/app.php[0x00007f231c23c6...
php cli 模式 curl请求越来越慢
lingdi2000的专栏
11-22 910
背景 项目使用workerman，其中有一块代码，会定时通过curl发送一个https请求，通知php-fpm。最近发现一个诡异的问题，程序刚开的时候正常没有问题，但是运行了几天 business处理请求就会异常的慢。上服务器查看status，发现进场是进场进入busy状态。 处理 因为是服务器内部的请求，所以就把ssl证书的校验关闭了 curl_setopt($curl, CURLOPT_SSL...
正则去除中括号（符号）及里面包含的内容
热门推荐
龚清林的博客
02-10 3万+
例子：颜色:粉色[10] 尺码:S[5] 去掉[ ]及内容： preg_replace("/\[.*\]/", '', $str) 处理后效果：颜色:粉色 尺码:S 小技巧：可把[ ]改为其他符号应用在需要的地方...
导致php curl请求接口很慢的原因，正常请求接口很快
07-12
导致 PHP cURL 请求接口很慢的原因可能有多种。以下是一些常见的原因： 1. 网络连接问题：慢速或不稳定的网络连接可能导致 cURL 请求变慢。您可以尝试使用其他网络连接或检查您的网络设置。 2. 服务器响应延迟：请求的服务器可能存在响应延迟，这可能是由于服务器负载过高或处理请求的时间较长导致的。您可以尝试与服务器管理员联系以获取更多信息。 3. DNS 解析延迟：cURL 请求可能需要解析域名以获取 IP 地址。如果 DNS 解析延迟较高，可能会导致请求变慢。您可以尝试更改 DNS 设置或使用 IP 地址而不是域名进行请求。 4. 请求参数或数据量过大：如果您的请求包含大量参数或需要传输大量数据，可能会导致请求变慢。您可以尝试优化请求参数或减少传输的数据量。 5. cURL 配置问题：您的 cURL 配置可能存在问题，例如超时设置过小或其他配置不当。您可以检查 cURL 配置并进行必要的调整。 请注意，以上仅列举了一些常见原因，具体原因可能需要根据您的具体情况进行进一步调查和排查。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

每天都进步一点点

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值