php connecttimeout,tcp会偶尔3秒timeout的分析以及如何用php规避这个问题

2年前做一个cache中间件调用的时候，发现很多通过php的curl调用一个的服务会出现偶尔的connect_time超时, 表现为get_curlinfo的connect_time在3秒左右, 本来没怎么注意, 因为客户端的curl_timeout设置的就是3秒, 某天, 我把这个timeout改到了5秒后, 发现了一

2年前做一个cache中间件调用的时候，发现很多通过php的curl调用一个的服务会出现偶尔的connect_time超时, 表现为get_curlinfo的connect_time在3秒左右, 本来没怎么注意, 因为客户端的curl_timeout设置的就是3秒, 某天, 我把这个timeout改到了5秒后, 发现了一个奇怪的现象, 很多慢请求依旧表现为connect_time在3秒左右..看来这个3秒并不是因为客户端设置的timeout引起的.于是开始查找这个原因.

首先, 凭借经验调整了linux内核关于tcp的几个参数

net.core.netdev_max_backlog = 862144

net.core.somaxconn = 262144

经过观察发现依旧会有3秒超时, 而且数量并没有减少.

第二步, 排除是大并发导致的问题, 在一台空闲机器上也部署同样的服务, 仅让线上一台机器跑空闲机器的服务, 结果发现依旧会有报错.排除并发导致的问题.

最后, 通过查了大量的资料才发现并不是我们才遇到过这个问题, 而且这个问题并不是curl的问题, 它影响到所有tcp的调用, 网上各种说法, 但结论都指向linux内核对于tcp的实现.(某些版本会出现这些问题), 有兴趣的可以看下下面这两个资料.

资料1

资料2

一看深入到linux内核..不管怎样修改的成本一定很大..于是乎, 发挥我们手中的php来规避这个问题的时间到了.

原本的代码, 简单实现，常规curl调用:

function curl_call($p1, $p2 ...) {

$ch = curl_init();

curl_setopt($ch, CURLOPT_TIMEOUT, 5);

curl_setopt($ch, CURLOPT_URL, 'http://demon.at');

$res = curl_exec($ch);

if (false === $res) {

//失败..抛异常..

}

return $res;

}

可以看出, 如果用上面的代码, 无法避免3秒connect_time的问题..这种实现对curl版本会有要求(CURLOPT_CONNECTTIMEOUT_MS)，主要的思路是，通过对链接时间进行毫秒级的控制(因为超时往往发生在connect的时候)，加上失败重试机制，来最大限度保证调用的正确性。所以,下面的代码就诞生了:

function curl_call($p1, $p2, $times = 1) {

$ch = curl_init();

curl_setopt($ch, CURLOPT_TIMEOUT, 5);

curl_setopt($ch, CURLOPT_URL, 'http://demon.at');

$curl_version = curl_version();

if ($curl_version['version_number'] >= 462850) {

curl_setopt($ch, CURLOPT_CONNECTTIMEOUT_MS, 20);

curl_setopt($ch, CURLOPT_NOSIGNAL, 1);

} else {

throw new Exception('this curl version is too low, version_num : '

. $curl_version['version']);

}

$res = curl_exec($ch);

curl_close($ch);

if (false === $res) {

if (curl_errno($ch) == CURLE_OPERATION_TIMEOUTED

and $times != 最大重试阀值 ) {

$times += 1;

return curl_call($p1, $p2, $times);

}

}

return $res;

}

上面这段代码只是一个规避的简单实例, 一些小细节并没有可以完善..比如抛出异常常以后curl资源的手动释放等等..这里不做讨论..当然还漏了一点要说的是，对重试次数最好加上限制 :)

说明一下上面几个数字值的含义:

462850 //因为php的CURLOPT_CONNECTTIMEOUT_MS需要 curl_version 7.16.2,这个值就是这个版本的数字版本号，还需要注意的是, php版本要大于5.2.3

20 //连接超时的时间, 单位:ms

这样这个问题就这样通过php的代码来规避开了.

如果有对这个问题有更好的解决方法，欢迎指教.

作者：蘑菇街蚩尤/Demon，江湖人称「门神」

作者简介：蘑菇街移动团队后端工程师，php 技术专家

擅长领域：php 性能调优、 yaf 框架，在 php 领域有多年技术经验

个人博客：http://demon.at/