PHP多线程性能测试

2019独角兽企业重金招聘Python工程师标准>>>

php提到多线程，主要用到的就是pthreads和curl_multi_init()，闲暇之余，写了个脚本对比了下性能。

配置如下

硬件

CPU型号: Intel(R) Xeon(R) CPU E5-2650 v2 @ 2.60GHz

内存: 2G

环境

系统：CentOS Linux release 7.2.1511 x86_64

语言: php7

其他：nginx+fpm

脚本

pthreads.php

<?php
class Request extends Thread {
    public $url;
    public $data;
    public function __construct($i) {
        $this->key = $i;
    }
    public function run() {
        $this->get();
	    //echo "线程 ".$this->key." 完成\n";
    }

    public function get() {
        $url = 'http://baike.baidu.com/link?url=nEdHS2eAR0az63Q476rLmPaWvrCTzLzr6bBNhbVyATQxlFX1VkI4ogidtzzLendMU2PI-_hcpdOZFwpytlfRc8OGc49CKl01YEJpvPe8EOu2FgdqfMAGMLDaLfkF_FRlK5brnRe90jhqUFJhn8tg_K';
        $ch = curl_init();
        curl_setopt($ch, CURLOPT_URL, $url);
        curl_setopt($ch, CURLOPT_HEADER, 0);
        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
        curl_exec($ch);
        curl_close($ch);
    }
}

for($i=0;$i<100;$i++) {
        $tmp[$i] = new Request($i);
        $tmp[$i]->start();
        //echo "线程".$i."启动\n";
}

curlmulti.php

<?php

$url = 'http://baike.baidu.com/link?url=nEdHS2eAR0az63Q476rLmPaWvrCTzLzr6bBNhbVyATQxlFX1VkI4ogidtzzLendMU2PI-_hcpdOZFwpytlfRc8OGc49CKl01YEJpvPe8EOu2FgdqfMAGMLDaLfkF_FRlK5brnRe90jhqUFJhn8tg_K';

$mh = curl_multi_init();

for($i=0; $i<100; $i++) {
        $ch = curl_init();
        curl_setopt($ch, CURLOPT_URL, $url);
        curl_setopt($ch, CURLOPT_HEADER, 0);
        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
        curl_multi_add_handle($mh, $ch);
        $chs[] = $ch;
}

do{
        curl_multi_exec($mh, $running);
        curl_multi_select($mh);
}while($running>0);

foreach($chs as $ch) {
        curl_multi_getcontent($ch);
        curl_multi_remove_handle($mh, $ch);
}

curl.php

<?php

$url = 'http://baike.baidu.com/link?url=nEdHS2eAR0az63Q476rLmPaWvrCTzLzr6bBNhbVyATQxlFX1VkI4ogidtzzLendMU2PI-_hcpdOZFwpytlfRc8OGc49CKl01YEJpvPe8EOu2FgdqfMAGMLDaLfkF_FRlK5brnRe90jhqUFJhn8tg_K';

for($i=0; $i<100; $i++) {
        $ch = curl_init();
        curl_setopt($ch, CURLOPT_URL, $url);
        curl_setopt($ch, CURLOPT_HEADER, 0);
        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
        $data = curl_exec($ch);
        curl_close($ch);
}

执行100次抓取的实验结果: | 脚本 | CPU最高波动 | 执行时间 | | --- | --- | --- | | pthreads.php | 5.5 | 7.3s | | curlmulti.php | 10 | 6.9s | | curl.php | 0.1 | 31.3s |

备注

1. 安装pthreads扩展的时候，非常麻烦，pthreads仅支持zts的php版本，由于本机已有php5.4，所以重新编译安装了php7，具体编译参数不详发，百度都能搜到。但是在安装pthreads扩展的时候，又出现问题，pecl.php.net上的扩展是有问题的，需要去github上源码clone下拉，phpize安装。
2. 由测试可知多线程对比单线程的优势是非常明显的，在php的两种多线程选择中，抓取业务的脚本建议使用curl_muliti_init处理，就是要注意cpu负载的问题。其余业务的多线程，建议使用多进程处理。
3. php 多进程使用pcntl扩展，popen()。

疑问

1. 查阅了部分文章后，仍然对多进程和多线程的优劣势，没有一个清晰的认知，感觉跟共享内存，文件锁之类的有关，有时间需要深入了解。
2. pcntl和popen的区别和优劣势？

转载于:https://my.oschina.net/u/948242/blog/887608