windows7下wget下载用法请教(如何跳过已下载文件)

博主在使用wget下载NASA数据文件时遇到效率问题,通过尝试不同参数组合,最终发现使用`-N`指令能快速跳过已下载文件,显著提升了下载效率。同时提到了`-nc`与`-N`的冲突,但对于两者的具体区别,博主还在探索中。
摘要由CSDN通过智能技术生成

windows7下wget下载用法请教

在使用wget下载NASA数据文件时,想要每天定时的下载数据文件,使用bat+wget定时下载,一开始的代码是这样的:

  • wget --load-cookies E:\NASA.urs_cookies --save-cookies E:\NASA.urs_cookies --auth-no-challenge=on --keep-session-cookies --user=XXXX --password=XXXX --content-disposition -r -c -N -P E:\NASA\ -R.tmp,.xml,.html https://acdisc.gesdisc.eosdis.nasa.gov/data/Aura_OMI_Level3/OMNO2d.003/2020/
    然后发现他运行过程中虽然会识别已经下载的文件,但是过程非常慢慢,是逐一识别跳过,到一定程度时就出现了如图所示:在这里插入图片描述
    然后修改代码

  • wget --load-cookies E:\NASA.urs_cookies --save-cookies E:\NASA.urs_cookies --auth-no-challenge=on -

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值