机制解决torchvision下载国外数据集mnist没有进度条的解决方案

当尝试使用torchvision下载MNIST数据集时,可能会遇到下载慢或无法下载的问题。可以寻找已下载的资源并放置到相应位置,但会遇到RuntimeError。原因是数据还需要进一步处理成.pt文件。通过查看源代码,可以将URL替换为本地文件路径来解决问题。此方法同样适用于CIFAR10/100数据集。
摘要由CSDN通过智能技术生成

我试着使用torchvison下载mnist数据集,但是由于是外国的站点,相信不只是mnist数据集,其他的数据集也可能遇到下载不了或者下载速度很慢的情况。cifar10/100也可以按照这样的方法进行下载

但是呢,很多人已经从外国的网站下载过了,你再下载它们共享的资源就可以下载成功,接下来你可以手工的把下载好的数据集放到恰当的位置。你可能以为是万事大吉了,但是它会报错:
RuntimeError: Dataset not found. You can use download=True to download it

这是为什么呢?我们取看他的源代码(按住ctrl,然后点击相应的函数)如下图:

 

 

 

 就可以看到源代码了,代码中还要对数据进行进一步处理,你的下载的文件不是它直接拿来用的,最后要处理成.pt文件,所以直接把数据集放在指定文件夹是不可行的。你可能想到把数据进行处理的代码拿出来,然后处理我们已经下载好的数据就可以了,我也这样尝试了,但是也会assertion报错,我就没有继续进行,而是采用了下面的简便的方案。

首先问题的根本原因就在于从外国网站下载数据很慢,这个时候。那么你可以把自己电脑上已经下载

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值