Python学习笔记34:使用Futures处理并发
概览
Futures模块是Python3中推荐使用的一个并发控制框架,我们可以使用这个模块编写多线程和多进程程序。
在Python中使用Futures模块很简单,只要先安装:
pip install futures
然后在Python代码中引用:
from concurrent import futures
在介绍如何用Futures实现并发之前,我们先看一个传统的下载程序。
一个传统的下载程序
这个示例程序使用requests
摸块进行下载,这个第三方模块需要安装:
pip install requests
requests是一个比官方提供的网络请求组件更好用的第三方模块,所以很多网上的Python网络程序都使用requests模块。
为了进行后面的下载测试,我们最好在自己的电脑上搭建一个简单的服务器,否则测试并发代码很容易被误认为是在进行DDOS攻击,被误封IP。
这里我使用电脑上安装的XAMPP作为服务器,想了解XAMPP如何安装和使用的可以阅读PHP开发环境(XAMPP+XDebug+VSCode)搭建。
打开Apache的虚拟主机配置文件httpd-vhosts.conf
,配置如下虚拟主机作为测试服务器:
<VirtualHost *:80>
ServerAdmin webmaster@dummy-host.example.com
DocumentRoot "D:\workspace\python\python-learning-notes\note34\myweb.com"
ServerName myweb.com
ServerAlias www.myweb.com
ErrorLog "logs/dummy-host.myweb.com-error.log"
CustomLog "logs/dummy-host.myweb.com-access.log" common
<Directory "D:\workspace\python\python-learning-notes\note34\myweb.com">
Require all granted
</Directory>
</VirtualHost>
为了进行测试,我在myweb.com
目录下放置了一个index.php
文件:
<?php
$name = isset($_GET['name']) ? $_GET['name'] : '';
$people = array(
'Han Meimei' => array(
'name' => 'Han Meimei',
'age' => '20',
'career' => 'student'
),
'Brus Lee' => array(
'name' => 'Brus Lee',
'age' => '30',
'career' => 'engineer'
),
'Jack Chen' => array(
'name' => 'Jack Chen',
'age' => '50',
'career' => 'actor'
)
);
$result = array('status' => 'success', 'result' => array());
if (array_key_exists($name, $people)) {
$result['result'] = $people[$name];
} else {
$result['status'] =