对于深度学习工程师,经常遇到需要下载大型模型权重/大型数据集的情况。大部分的情况是比较好处理的,比如通过huggingface公开的数据集。然而,Google Drive,One Drive等网盘没有提供命令行工具,不方便大批量下载数据;GitHub release虽然提供了可供直接wget/curl的超链接,但是直接下载非常缓慢。针对这两类问题,调研解决方法如下:
使用命令行下载Google Drive/OneDrive大文件:https://zhuanlan.zhihu.com/p/632737814
使用镜像网站提供的超链接快速下载GitHub release:https://zhuanlan.zhihu.com/p/521472595
12-20
7730
![](https://csdnimg.cn/release/blogv2/dist/pc/img/readCountWhite.png)
“相关推荐”对你有帮助么?
-
非常没帮助
-
没帮助
-
一般
-
有帮助
-
非常有帮助
提交