workman在HTTP协议下的IO阻塞任务,如何保证请求均匀分配到进程

比如以HTTP协议创建了5个进程,然后每个进程里的业务执行时间是2秒。

然后并发4个用户,16次请求

ab -c 4 -n 16 'http://127.0.0.1:8080/'

结果请求并没有均匀分配到进程,某个进程对某个请求进行了阻塞

2018-05-31 15:48:22.6796 service_log 'executeTime:2.0680978298187'
2018-05-31 15:48:22.6797 service_log 'executeTime:2.0688819885254'
2018-05-31 15:48:22.6799 service_log 'executeTime:2.069078207016'
2018-05-31 15:48:22.6801 service_log 'executeTime:2.0692131519318'

2018-05-31 15:48:24.6901 service_log 'executeTime:2.0080099105835'
2018-05-31 15:48:24.6901 service_log 'executeTime:2.0079879760742'

2018-05-31 15:48:26.6998 service_log 'executeTime:2.0084669589996'
2018-05-31 15:48:26.6998 service_log 'executeTime:2.0076689720154'
2018-05-31 15:48:26.6998 service_log 'executeTime:2.0074841976166'
2018-05-31 15:48:26.6999 service_log 'executeTime:2.0084929466248'

2018-05-31 15:48:28.7072 service_log 'executeTime:2.0056090354919'
2018-05-31 15:48:28.7073 service_log 'executeTime:2.0057229995728'
2018-05-31 15:48:28.7073 service_log 'executeTime:2.0057458877563'

2018-05-31 15:48:30.7168 service_log 'executeTime:2.0076150894165'
2018-05-31 15:48:30.7171 service_log 'executeTime:2.0088679790497'
2018-05-31 15:48:30.7173 service_log 'executeTime:2.0084898471832

可以通过在建立连接后暂停请求,结束后关闭请求的方式,避免多个请求阻塞到一个进程中执行:

$worker->onConnect = function(TcpConnection $connection)use($worker) {
    $worker->pauseAccept(); // 暂停接收请求

    // 接收消息回调
    $connection->onMessage = function (TcpConnection $connection, $data) {
        // 耗时代码
        $connection->close('success‘); // 关闭连接
    };
};
$worker->onClose = function(TcpConnection $connection)use($worker) {
    $worker->resumeAccept(); // 恢复接收请求
};

最后就得到了如下结果:

2018-05-31 16:34:22.2053 service_log 'executeTime:2.058121919632'
2018-05-31 16:34:22.2053 service_log 'executeTime:2.0567870140076'
2018-05-31 16:34:22.3065 service_log 'executeTime:2.1597728729248'
2018-05-31 16:34:22.3065 service_log 'executeTime:2.1576390266418'

2018-05-31 16:34:24.3266 service_log 'executeTime:2.1183500289917'
2018-05-31 16:34:24.3267 service_log 'executeTime:2.1188020706177'
2018-05-31 16:34:24.4269 service_log 'executeTime:2.1188299655914'
2018-05-31 16:34:24.4272 service_log 'executeTime:2.118989944458'

2018-05-31 16:34:26.4402 service_log 'executeTime:2.1116380691528'
2018-05-31 16:34:26.4402 service_log 'executeTime:2.1118400096893'
2018-05-31 16:34:26.5402 service_log 'executeTime:2.1115860939026'
2018-05-31 16:34:26.5402 service_log 'executeTime:2.1114778518677'

2018-05-31 16:34:28.4544 service_log 'executeTime:2.0095458030701'
2018-05-31 16:34:28.5551 service_log 'executeTime:2.1137058734894'
2018-05-31 16:34:28.6556 service_log 'executeTime:2.1138899326324'
2018-05-31 16:34:28.6556 service_log 'executeTime:2.1138758659363'

以上是单一的HTTP协议的worker模型,之后我试过用HTTP协议的worker接收请求,然后异步转发给TCP协议的worker进行处理,发现如果一次性发起多个请求时,TCP协议的worker也会出现类似上面的情况,然后通过上面的方法,也很完美的解决了这个问题。

最后我觉得pauseAccept()、resumeAccept()应用场景很多啊,比如生存消费者模型中,消费者IO阻塞等待任务,又比如对时间点要求较高的爬虫任务,能尽量的均匀分配请求到进程,进而减少时间差。

转自:HTTP协议下的IO阻塞任务,如何保证请求均匀分配到进程-workerman社区

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
Workerman中,可以通过使用异步任务来处理长连接中的业务逻辑,避免阻塞进程。异步任务可以在Worker进程中通过`AsyncTask`类来实现,具体的步骤如下: 1. 在Worker进程中创建`AsyncTask`对象,指定异步任务的处理方法。 ```php use \Workerman\Worker; use \Workerman\MySQL\Connection; use \Workerman\AsyncTask; $worker = new Worker('tcp://0.0.0.0:8000'); $worker->onWorkerStart = function($worker) { // 创建MySQL连接 $mysql = new Connection('127.0.0.1', '3306', 'username', 'password', 'dbname'); // 创建异步任务 $task = new AsyncTask(); // 设置异步任务的处理方法 $task->onMessage = function($task, $data) use ($mysql) { // 处理业务逻辑 $result = $mysql->query('SELECT * FROM users WHERE id='.$data); // 返回处理结果 $task->send($result); }; // 将异步任务注册到Worker进程中 $worker->addTask($task); }; ``` 2. 在客户端连接上来后,将需要处理的数据发送到异步任务中,等待异步任务处理完成后,再将结果返回给客户端。 ```php $worker->onConnect = function($connection) use ($worker) { // 接收客户端发送的数据 $connection->onMessage = function($connection, $data) use ($worker) { // 将数据发送到异步任务中处理 $worker->task($data, function($result) use ($connection) { // 处理异步任务返回的结果 $connection->send(json_encode($result)); }); }; }; ``` 通过以上的步骤,我们就可以在长连接中使用异步任务来处理业务逻辑了。需要注意的是,异步任务的处理方法会在Worker进程中的异步任务进程中执行,所以需要将需要的资源例如MySQL连接等在onWorkerStart回调函数中创建。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值