【IDM下载CIMAP6-CORDEX data】


前言

cordex常规下载通常都是用wget下载,wget下载速度比较缓慢。因此参考知乎用户呆头灰鸟写的《使用IDM下载器批量下载CMIP6数据的流程》。网页链接:https://zhuanlan.zhihu.com/p/164812122
尝试进行cordex数据的下载

一、注册CIMAP6

划重点:在如下网址选择需要加入的项目。

https://esg-dn1.nsc.liu.se/projects/esgf-liu/
在这里插入图片描述
由于我需要下载cordex的项目,因此我需要join CORDEX。随后创建账户获得openid,并选择自己要下载的数据。
必须要注册CORDEX GROUP group链接

选择CORDEX_Research

随后就可以成功下载了

二、批量下载cordex data

1.选择数据集,生成wget

在my data cart 生成wget
在这里插入图片描述

2.生成下载链接

将wget-xxxxxx.sh里面的链接信息全部复制生成新的txt文本。利用下列代码生成纯链接文本。

在这里插入图片描述
在这里插入图片描述

代码如下(示例):

if __name__ == '__main__':
    fw = open("E:\\CORDEX-TP\\REMO1.txt", 'w')  # 创建url保存文件
    with open("E:\\CORDEX-TP\\remo.txt", 'r') as fr:  # 读取所有下载链接信息
        for line in fr.readlines():  # 按行读取
            line = line.strip('\n').split(' ')  # 去掉换行符并分割
            url = line[1].replace("'", '')  # 清洗并获取待下载地址
            fw.writelines(url + '\n')  # 将下载地址写入保存文件中
    fw.close()  # 关闭文件

IDM批量下载CIMAP6

总结

采用IDM能够很好地增强下载速度,提高下载速率。tips:要想成功下载cordex数据一定要注册相应group。

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值