php依次远程下载多文件,解析php多线程下载远程多个文件

function remote($urls, $name = '', $path = '', $dir = './images/') {

if (!is_array($urls) or count($urls) == 0) {

return false;

}

dmkdir($dir);

$curl = $text = array();

foreach($urls as $k => $v) {

if (!empty($v) && preg_match("~^http~i", $v)) {

$nurl[$k] = trim(str_replace(' ', "%20", $v));

$curl[$k] = curl_init($nurl[$k]);

curl_setopt($curl[$k], CURLOPT_IPRESOLVE, CURL_IPRESOLVE_V4 );

curl_setopt($curl[$k], CURLOPT_RETURNTRANSFER, 1);

curl_setopt($curl[$k], CURLOPT_HEADER, 0);

curl_setopt($curl[$k], CURLOPT_CONNECTTIMEOUT, 20);

if(!isset($handle)){

$handle = curl_multi_init();

}

curl_multi_add_handle($handle, $curl[$k]);

}

continue ;

}

$active = null;

do{

$mrc = @curl_multi_exec($handle, $active);

} while ($mrc == CURLM_CALL_MULTI_PERFORM);

while ($active && $mrc == CURLM_OK) {

if (curl_multi_select($handle) != -1) {

do {

$mrc = curl_multi_exec($handle, $active);

} while ($mrc == CURLM_CALL_MULTI_PERFORM);

}

}

foreach ($curl as $k => $v) {

if (curl_error($curl[$k]) == "") {

if ($k == 0) {

$fname[$k] = strtolower($name . '.' . pathinfo($urls[$k], PATHINFO_EXTENSION));

} else {

$fname[$k] = strtolower($name . '_' . $k . '.' . pathinfo($urls[$k], PATHINFO_EXTENSION));

}

$text[$k] = (string) curl_multi_getcontent($curl[$k]);

$filedir[$k] = $dir.'/' . $fname[$k];

if (file_put_contents($filedir[$k], $text[$k])) {

$filepath[$k] = $path . $fname[$k];

}

}

curl_multi_remove_handle($handle, $curl[$k]);

curl_close($curl[$k]);

}

curl_multi_close($handle);

return $filepath;

}

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
FTP客户端下载多个文件时,可以通过多线程实现并行下载,从而提高下载速度。以下是一个基本的多线程FTP文件下载的示例代码: ```python import threading from ftplib import FTP class FTPThread(threading.Thread): def __init__(self, ftp, file_name, local_path): threading.Thread.__init__(self) self.ftp = ftp self.file_name = file_name self.local_path = local_path def run(self): with open(self.local_path + '/' + self.file_name, 'wb') as f: self.ftp.retrbinary('RETR ' + self.file_name, f.write) def download_files(server, username, password, remote_path, local_path, num_threads=5): ftp = FTP(server) ftp.login(user=username, passwd=password) ftp.cwd(remote_path) files = ftp.nlst() threads = [] for i in range(num_threads): thread_files = files[i::num_threads] for file_name in thread_files: t = FTPThread(ftp, file_name, local_path) threads.append(t) t.start() for t in threads: t.join() ftp.quit() ``` 上述代码中,我们创建了一个 `FTPThread` 类来下载单个文件。在 `download_files` 函数中,我们首先连接到FTP服务器,然后获取指定目录中的所有文件列表。接下来,我们将文件列表分成 `num_threads` 组,并将每个组分配给一个线程。每个线程负责下载其分配的文件。最后,我们等待所有线程执行完毕,并关闭FTP连接。 使用该函数时,只需提供FTP服务器地址、用户名、密码、远程文件路径和本地文件路径即可。 ```python download_files('ftp.example.com', 'username', 'password', '/remote/path', '/local/path', num_threads=5) ``` 这样,就可以使用多线程实现FTP多个文件的并行下载了。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值