MATLAB websave批量下载(URL)

任务描述:需要根据URL批量下载NASA发布的GPM(全球降雨观测计划)数据
已得到Data File Links如下:
在这里插入图片描述从第3行开始就是所需要的数据的URL链接
NASA下载数据是要先登录的,所以我们也需要进行身份识别,否则就会报错(error401,unauthorized),详见:
MALTAB websave(根据URL下载方法)以及 error 401(unauthorized)

代码如下:
(加了一些比较有意思的东西。如waitbar,调教一下MATLAB哈哈哈)

%% 读取NASA的Data File Links,批量下载GPM数据
url_total = textread('C:\Users\DELL\Downloads\GPM_day.txt','%s'); 

username = '*********';    %输入自己的注册账号和密码
password = '*********';
options = weboptions('HeaderFields',{'Authorization',...
    ['Basic ' matlab.net.base64encode([username ':' password])]});

h = waitbar(0,'主人,我要开始工作了~');
for i = 3:length(url_total)
    url = url_total{i};
    filename = (['F:\Global_P_ET\GPM\GPM_3IMERGDF_v06_DAY_',url_total{i}(length(url_total{i})-31:length(url_total{i})-24),'.nc4']);
    websave(filename,url,options);
    
    %以下三行可以不管,作用只是显示进度
    disp([url_total{i}(length(url_total{i})-31:length(url_total{i})-24),'_finished!'])  
    s = ['主人,工作已完成 ',num2str(i/length(url_total)*100,'%.2f'),'%,请耐心些等待哦'];
    waitbar(i/length(url_total),h,s);    
end
close(h)

Finish!

在这里插入图片描述

  • 14
    点赞
  • 25
    收藏
    觉得还不错? 一键收藏
  • 16
    评论
使用matlab批量下载网站上的文件-MatlabUrlDownloadToFile.m 前几天美国数学建模成绩出了,我们按照网址下载了自己的证书,另外想看看学校今年的获奖情况,由于学校的参赛队伍数众多,一个一个下载证书再统计显得麻烦,于是想自己用matlab开发一个小程序以实现同类型文件的批量下载。很多网站上有介绍使用Windows API 函数URLDownloadToFile,但是这个在VC上实现容易,要把它移植到matlab上还得使用MEX,有点麻烦了。这几天一直徘徊个大小网站,没有找到相关信息。最后还是自己使用lookfor找到需要的函UrlWrite,调用这个函数轻松搞定批量下载! 以下是代码: %使用matlab下载网站上的文件 %使用urlwrite函数下载网站上的文件 %特别适用于批量下载同类型的文件 % Created by longwen36 2011-4-16 %使用urlwrite实现批量下载 %以下载2011美赛数模证书为例 clc,clear; num = 11701:11710; URLs = cell); folder_filenames = cell); filenames = cell); for idx  = 1:length;     URLs{idx} = sprintf);     filenames{idx} = sprintf); end tic; for idx = 1:length;     fprintf;     [f, status] = urlwrite;     if status == 1;         fprintf;     else         fprintf;     end     end etime = toc; fprintf,etime); 复制代码 下载速度还挺快的,才发现,matlab功能确实很强大,函数很齐全。利用这个函数,加以改进,编写GUI,就可以做个简易的批量下载器了! 感兴趣的同仁可以试试!

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 16
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值