pconnect, phpredis中用于client连接server的api。
The connection will not be closed on close or end of request until the php process ends.
这是api说明中的一句原文
那么问题来了:
1. php process ends是指一次php执行完结,还是fpm的终结?如果是后者,那意味着即使一次php执行完毕,redis连接也不会被释放,下一次执行时redis连接会被重用。
2. The connection will not be closed on close是 说如果使用了pconnect, 即使在代码中显示的调用close(), 也不会关闭连接?
带着这两个问题,我们做下实验,深入看一下pconnect究竟做了些什么。
准备工作
环境:
nginx + fpm
php5.3
我们将fpm配置为
<code class="hljs avrasm has-numbering" style="display: block; padding: 0px; color: inherit; box-sizing: border-box; font-family: 'Source Code Pro', monospace;font-size:undefined; white-space: pre; border-radius: 0px; word-wrap: normal; background: transparent;">pm<span class="hljs-preprocessor" style="color: rgb(68, 68, 68); box-sizing: border-box;">.max</span>_children = <span class="hljs-number" style="color: rgb(0, 102, 102); box-sizing: border-box;">1</span>
pm<span class="hljs-preprocessor" style="color: rgb(68, 68, 68); box-sizing: border-box;">.start</span>_servers = <span class="hljs-number" style="color: rgb(0, 102, 102); box-sizing: border-box;">1</span>
pm<span class="hljs-preprocessor" style="color: rgb(68, 68, 68); box-sizing: border-box;">.max</span>_spare_servers = <span class="hljs-number" style="color: rgb(0, 102, 102); box-sizing: border-box;">1</span></code><ul class="pre-numbering" style="box-sizing: border-box; position: absolute; width: 50px; top: 0px; left: 0px; margin: 0px; padding: 6px 0px 40px; border-right-width: 1px; border-right-style: solid; border-right-color: rgb(221, 221, 221); list-style: none; text-align: right; background-color: rgb(238, 238, 238);"><li style="box-sizing: border-box; padding: 0px 5px;">1</li><li style="box-sizing: border-box; padding: 0px 5px;">2</li><li style="box-sizing: border-box; padding: 0px 5px;">3</li></ul>
这样,我们的页面请求会由一个确定的fpm进程执行,方便strace跟踪。
对应页面请求的php代码:
<code class="language-php hljs has-numbering" style="display: block; padding: 0px; color: inherit; box-sizing: border-box; font-family: 'Source Code Pro', monospace;font-size:undefined; white-space: pre; border-radius: 0px; word-wrap: normal; background: transparent;"><span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$ip</span> = <span class="hljs-string" style="color: rgb(0, 136, 0); box-sizing: border-box;">"10.136.30.144"</span>;
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$port</span> = <span class="hljs-number" style="color: rgb(0, 102, 102); box-sizing: border-box;">7777</span>;
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$redis</span> = <span class="hljs-keyword" style="color: rgb(0, 0, 136); box-sizing: border-box;">new</span> Redis();
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$redis</span>->pconnect(<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$ip</span>, <span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$port</span>, <span class="hljs-number" style="color: rgb(0, 102, 102); box-sizing: border-box;">1</span>);
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$key</span> = <span class="hljs-string" style="color: rgb(0, 136, 0); box-sizing: border-box;">"test"</span>;
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$value</span> = <span class="hljs-string" style="color: rgb(0, 136, 0); box-sizing: border-box;">"this is test"</span>;
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$redis</span>->set(<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$key</span>, <span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$value</span>);
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$d</span> = <span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$redis</span>->get(<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$key</span>);
var_dump(<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$d</span>);</code><ul class="pre-numbering" style="box-sizing: border-box; position: absolute; width: 50px; top: 0px; left: 0px; margin: 0px; padding: 6px 0px 40px; border-right-width: 1px; border-right-style: solid; border-right-color: rgb(221, 221, 221); list-style: none; text-align: right; background-color: rgb(238, 238, 238);"><li style="box-sizing: border-box; padding: 0px 5px;">1</li><li style="box-sizing: border-box; padding: 0px 5px;">2</li><li style="box-sizing: border-box; padding: 0px 5px;">3</li><li style="box-sizing: border-box; padding: 0px 5px;">4</li><li style="box-sizing: border-box; padding: 0px 5px;">5</li><li style="box-sizing: border-box; padding: 0px 5px;">6</li><li style="box-sizing: border-box; padding: 0px 5px;">7</li><li style="box-sizing: border-box; padding: 0px 5px;">8</li><li style="box-sizing: border-box; padding: 0px 5px;">9</li><li style="box-sizing: border-box; padding: 0px 5px;">10</li><li style="box-sizing: border-box; padding: 0px 5px;">11</li></ul>
代码的功能很简单,连接redis,先设置一个值,再取出。
测试问题1
思路:
使用strace观察fpm的系统调用,如果连接的生命周期是一次php执行,那么每次页面调用,都会有connect系统调用,用以连接redis;如果连接的生命周期是fpm的终结,那么只有第一次页面调用会有connect系统调用 ,之后由于连接被重用,无需connect,直接发命令请求即可。
启动一个新的fpm(进程号28082)。
执行
<code class="language-shell hljs lasso has-numbering" style="display: block; padding: 0px; color: inherit; box-sizing: border-box; font-family: 'Source Code Pro', monospace;font-size:undefined; white-space: pre; border-radius: 0px; word-wrap: normal; background: transparent;">strace <span class="hljs-attribute" style="box-sizing: border-box;">-p</span> <span class="hljs-number" style="color: rgb(0, 102, 102); box-sizing: border-box;">28082</span> <span class="hljs-attribute" style="box-sizing: border-box;">-s</span> <span class="hljs-number" style="color: rgb(0, 102, 102); box-sizing: border-box;">1024</span> <span class="hljs-attribute" style="box-sizing: border-box;">-o</span> redis_1</code><ul class="pre-numbering" style="box-sizing: border-box; position: absolute; width: 50px; top: 0px; left: 0px; margin: 0px; padding: 6px 0px 40px; border-right-width: 1px; border-right-style: solid; border-right-color: rgb(221, 221, 221); list-style: none; text-align: right; background-color: rgb(238, 238, 238);"><li style="box-sizing: border-box; padding: 0px 5px;">1</li></ul>
记录一次页面请求的系统调用。如下图所示:
可以看到进程先建立了socket连接(文件描述符为9)。然后给reids发一系列命令,最终取到“this is test”的结果串。且没有关闭连接相关的redis命令或系统调用。
页面请求结束后,我们执行
<code class="language-shell hljs lasso has-numbering" style="display: block; padding: 0px; color: inherit; box-sizing: border-box; font-family: 'Source Code Pro', monospace;font-size:undefined; white-space: pre; border-radius: 0px; word-wrap: normal; background: transparent;">lsof <span class="hljs-attribute" style="box-sizing: border-box;">-n</span> <span class="hljs-attribute" style="box-sizing: border-box;">-p</span> <span class="hljs-number" style="color: rgb(0, 102, 102); box-sizing: border-box;">28082</span></code><ul class="pre-numbering" style="box-sizing: border-box; position: absolute; width: 50px; top: 0px; left: 0px; margin: 0px; padding: 6px 0px 40px; border-right-width: 1px; border-right-style: solid; border-right-color: rgb(221, 221, 221); list-style: none; text-align: right; background-color: rgb(238, 238, 238);"><li style="box-sizing: border-box; padding: 0px 5px;">1</li></ul>
可以看到,fpm进程仍然保有一个到10.136.30.144的reids连接,其文件描述符为9(这与strace的结果一致)。
执行
<code class="hljs lasso has-numbering" style="display: block; padding: 0px; color: inherit; box-sizing: border-box; font-family: 'Source Code Pro', monospace;font-size:undefined; white-space: pre; border-radius: 0px; word-wrap: normal; background: transparent;">strace <span class="hljs-attribute" style="box-sizing: border-box;">-p</span> <span class="hljs-number" style="color: rgb(0, 102, 102); box-sizing: border-box;">28082</span> <span class="hljs-attribute" style="box-sizing: border-box;">-s</span> <span class="hljs-number" style="color: rgb(0, 102, 102); box-sizing: border-box;">1024</span> <span class="hljs-attribute" style="box-sizing: border-box;">-o</span> redis_2</code><ul class="pre-numbering" style="box-sizing: border-box; position: absolute; width: 50px; top: 0px; left: 0px; margin: 0px; padding: 6px 0px 40px; border-right-width: 1px; border-right-style: solid; border-right-color: rgb(221, 221, 221); list-style: none; text-align: right; background-color: rgb(238, 238, 238);"><li style="box-sizing: border-box; padding: 0px 5px;">1</li></ul>
记录 第二次页面请求的系统调用,得到下面结果。
与第一次请求的区别是:省去了建立连接的过程,直接发送reids命令,得到结果!
再使用lsof -n -p 28082查看fpm打开的文件描述符,结果与上文件相同。
说明,连接的确是被重用的,没有新建。
执行第6次页面请求(因为我们在准备工作中的配置,此时fpm已经是一个新的进程了),用lsof查看进程打开的文件描述符。
我们发现,虽然仍然有描述符为9的reids连接,但两个tcp连接的临时端口不同了,也就是连接改变了!
至此,我们得出问题1的结论:
当使用pconnect时,连接会被重用,连接的生命周期是fpm进程的生命周期,而非一次php的执行。。
测试问题2
为了对比,我们先看一下,使用connect连接redis,并调用redis->close()的系统调用。(将上述代码中的pconnect改为connect, 同时在最后加入redis->close())
我们看到,除了建立连接外,在程序结尾,还向reids发送了quit命令,并关闭了连接的文件描述符。
接下来,我们看在使用pconnect后,redis->close()有何表现
代码调整为:
<code class="language-php hljs has-numbering" style="display: block; padding: 0px; color: inherit; box-sizing: border-box; font-family: 'Source Code Pro', monospace;font-size:undefined; white-space: pre; border-radius: 0px; word-wrap: normal; background: transparent;"><span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$ip</span> = <span class="hljs-string" style="color: rgb(0, 136, 0); box-sizing: border-box;">"10.136.30.144"</span>;
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$port</span> = <span class="hljs-number" style="color: rgb(0, 102, 102); box-sizing: border-box;">7777</span>;
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$redis</span> = <span class="hljs-keyword" style="color: rgb(0, 0, 136); box-sizing: border-box;">new</span> Redis();
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$redis</span>->pconnect(<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$ip</span>, <span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$port</span>, <span class="hljs-number" style="color: rgb(0, 102, 102); box-sizing: border-box;">1</span>);
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$key</span> = <span class="hljs-string" style="color: rgb(0, 136, 0); box-sizing: border-box;">"test"</span>;
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$value</span> = <span class="hljs-string" style="color: rgb(0, 136, 0); box-sizing: border-box;">"this is test"</span>;
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$redis</span>->set(<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$key</span>, <span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$value</span>);
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$d</span> = <span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$redis</span>->get(<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$key</span>);
var_dump(<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$d</span>);
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$redis</span>->close();
<span class="hljs-keyword" style="color: rgb(0, 0, 136); box-sizing: border-box;">try</span>{
<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$redis</span>->get(<span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$key</span>);
}
<span class="hljs-keyword" style="color: rgb(0, 0, 136); box-sizing: border-box;">catch</span> (<span class="hljs-keyword" style="color: rgb(0, 0, 136); box-sizing: border-box;">Exception</span> <span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$e</span>){
<span class="hljs-keyword" style="color: rgb(0, 0, 136); box-sizing: border-box;">echo</span> <span class="hljs-variable" style="color: rgb(102, 0, 102); box-sizing: border-box;">$e</span>->getMessage();
}</code><ul class="pre-numbering" style="box-sizing: border-box; position: absolute; width: 50px; top: 0px; left: 0px; margin: 0px; padding: 6px 0px 40px; border-right-width: 1px; border-right-style: solid; border-right-color: rgb(221, 221, 221); list-style: none; text-align: right; background-color: rgb(238, 238, 238);"><li style="box-sizing: border-box; padding: 0px 5px;">1</li><li style="box-sizing: border-box; padding: 0px 5px;">2</li><li style="box-sizing: border-box; padding: 0px 5px;">3</li><li style="box-sizing: border-box; padding: 0px 5px;">4</li><li style="box-sizing: border-box; padding: 0px 5px;">5</li><li style="box-sizing: border-box; padding: 0px 5px;">6</li><li style="box-sizing: border-box; padding: 0px 5px;">7</li><li style="box-sizing: border-box; padding: 0px 5px;">8</li><li style="box-sizing: border-box; padding: 0px 5px;">9</li><li style="box-sizing: border-box; padding: 0px 5px;">10</li><li style="box-sizing: border-box; padding: 0px 5px;">11</li><li style="box-sizing: border-box; padding: 0px 5px;">12</li><li style="box-sizing: border-box; padding: 0px 5px;">13</li><li style="box-sizing: border-box; padding: 0px 5px;">14</li><li style="box-sizing: border-box; padding: 0px 5px;">15</li><li style="box-sizing: border-box; padding: 0px 5px;">16</li><li style="box-sizing: border-box; padding: 0px 5px;">17</li></ul>
我们直接看第2次执行页面请求的系统调用
并没有建立连接,同样是直接发送命令得到结果。说明连接被重用。同时,没有向reids server发送quit命令,也无关闭连接的系统调用。
但注意,页面请求的返回结果:
至此,我们得出问题2的结论:
如果代码中使用pconnect, close的作用仅是使当前php不能再进行redis请求,但无法真正关闭redis长连接,连接在后续请求中仍然会被重用,直至fpm进程生命周期结束。
结论
1. 当使用pconnect时,连接会被重用,连接的生命周期是fpm进程的生命周期,而非一次php的执行。
2.如果代码中使用pconnect, close的作用仅是使当前php不能再进行redis请求,但无法真正关闭redis长连接,连接在后续请求中仍然会被重用,直至fpm进程生命周期结束。
-----------------
add by zhai :
3. 显然,由于php-fpm对连接的重用性, 所以, 当存在cgi进程管理器[如php-fpm,spawn-cgi], 使用pconnect效率比connect高。 但是由于每个持久连接会占用内存, 当并发量很大的时, 很可能造成内存吃紧, 所以权衡利弊好 用pconnect的地方。