php curl_multi批量发送http请求

一、使用curl_multi批量发送http请求

引子:在Android4.0开发中,发送Http请求已经不允许在主进程中执行了,必须在线程中执行。原因在于Http接口响应时间有可能阻塞主进程事件监听(对于.Net开发,其实也是如此)。但是,由于PHP并没有多线程的概念,那么,如何高效率在PHP中执行多次http请求呢?答案是使用curl_multi_init,由此,我做了一个实验。

以下是模拟请求的http接口,代码很简单,通过get传入的参数time,控制了sleep的时间。

[php]  view plain  copy
  1. $s_time = intval($_GET['time']);  
  2. sleep($s_time);  
  3. echo 'hello';  

接下来仅仅使用curl_init,代码如下:

[php]  view plain  copy
  1. $start = microtime(true);  
  2. for ($i = 1;$i <= 5;++$i) {  
  3.     $ch = curl_init("http://test.binbin.com/curl/test.php?time={$i}");  
  4.     curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);  
  5.     curl_exec($ch);  
  6. }  
  7. $end = microtime(true);  
  8. echo $end-$start;  
执行的时间约为15秒,是所有sleep时间总和,现在,来看看使用了curl_multi_init的时间

[php]  view plain  copy
  1. $start = microtime(true);  
  2. $ch_list = array();  
  3. $multi_ch = curl_multi_init();  
  4. for ($i = 1;$i <= 5;++$i) {  
  5.     $ch_list[$i] = curl_init("http://test.binbin.com/curl/test.php?time={$i}");  
  6.     curl_setopt($ch_list[$i], CURLOPT_RETURNTRANSFER, true);  
  7.     curl_multi_add_handle($multi_ch$ch_list[$i]);  
  8. }  
  9. $active = null;  
  10. do {  
  11.     $mrc = curl_multi_exec($multi_ch$active); //处理在栈中的每一个句柄。无论该句柄需要读取或写入数据都可调用此方法。  
  12. while ($mrc == CURLM_CALL_MULTI_PERFORM);   
  13. //Note:  
  14. //该函数仅返回关于整个批处理栈相关的错误。即使返回 CURLM_OK 时单个传输仍可能有问题。  
  15.   
  16.   
  17. while ($active && $mrc == CURLM_OK) {  
  18.     if (curl_multi_select($multi_ch) != -1) { //阻塞直到cURL批处理连接中有活动连接。  
  19.         do {  
  20.         $mrc = curl_multi_exec($multi_ch$active);  
  21.         } while ($mrc == CURLM_CALL_MULTI_PERFORM);  
  22.     }  
  23. }  
  24. //获取http返回的结果  
  25. foreach ($ch_list as $k => $ch) {  
  26.     $result=curl_multi_getcontent($ch);  
  27.     curl_multi_remove_handle($multi_ch,$ch);  
  28.     curl_close($ch);  
  29. }  
  30. curl_multi_close($multi_ch);  
  31. $end = microtime(true);  
  32. echo $end-$start;  
结果是仅仅需要5秒钟,即使最长http请求的执行时间。

后记:curl_errno在curl_multi下即使发生错误也无法获取错误码,可以使用curl_error来获取错误字符串,如果没有发生错误,则返回一个空的字符串

二、curlmulti系列函数说明

函数名称 函数说明
curl_multi_init 返回一个新的curl_multi资源句柄,失败时返回false
curl_multi_add_handle 向curl批处理会话中添加单独的curl句柄
curl_multi_exec 运行当前 cURL 句柄的子连接
curl_multi_select 等待所有cURL批处理中的活动连接,成功时返回描述符集合中描述符的数量。失败时,select失败时返回-1。
curl_multi_getcontent 获取curl句柄的返回结果内容
curl_multi_close 关闭一个curl_multi资源句柄
curl_multi_info_read 获取当前解析的cURL的相关传输信息
PHPcURL 库提供了一个 `curl_multi_*` 系列的函数,可以实现批量处理多个 cURL 请求。使用 `curl_multi_*` 函数,可以实现在一个 PHP 脚本中同时发送多个 cURL 请求,而不需要等待每个请求的响应。 使用 `curl_multi_*` 函数的步骤如下: 1. 创建多个 cURL 句柄,设置每个句柄的选项。 2. 创建一个 cURL 多个句柄的管理器。 3. 将多个 cURL 句柄添加到管理器中。 4. 执行多个 cURL 句柄,等待所有请求的响应。 5. 处理每个请求的响应。 下面是一个示例代码: ``` <?php // 创建多个 cURL 句柄 $urls = [ 'http://www.example.com', 'http://www.example.net', 'http://www.example.org', ]; $curl_handlers = []; foreach ($urls as $url) { $ch = curl_init(); curl_setopt($ch, CURLOPT_URL, $url); curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); $curl_handlers[] = $ch; } // 创建一个 cURL 多个句柄的管理器 $mh = curl_multi_init(); // 将多个 cURL 句柄添加到管理器中 foreach ($curl_handlers as $ch) { curl_multi_add_handle($mh, $ch); } // 执行多个 cURL 句柄,等待所有请求的响应 $active = null; do { $mrc = curl_multi_exec($mh, $active); } while ($mrc == CURLM_CALL_MULTI_PERFORM); while ($active && $mrc == CURLM_OK) { if (curl_multi_select($mh) == -1) { usleep(100); } do { $mrc = curl_multi_exec($mh, $active); } while ($mrc == CURLM_CALL_MULTI_PERFORM); } // 处理每个请求的响应 foreach ($curl_handlers as $ch) { $output = curl_multi_getcontent($ch); curl_multi_remove_handle($mh, $ch); curl_close($ch); // 处理响应 echo $output; } curl_multi_close($mh); ``` 上述代码将创建多个 cURL 句柄,将它们添加到一个 cURL 多个句柄的管理器中,然后使用 `curl_multi_exec()` 函数并通过 `curl_multi_select()` 函数等待所有请求的响应。最后,使用 `curl_multi_getcontent()` 函数获取每个请求的响应,并处理它们。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值