解决Kaggle网站下载数据集速度慢

最新推荐文章于 2024-04-06 10:48:13 发布

秦天宝.

最新推荐文章于 2024-04-06 10:48:13 发布

阅读量4.8k

点赞数 4

分类专栏：编程 python 文章标签： python 人工智能

本文链接：https://blog.csdn.net/qq_52222102/article/details/125088134

版权

编程同时被 2 个专栏收录

10 篇文章 0 订阅

订阅专栏

python

5 篇文章 0 订阅

订阅专栏

最近在写代码的时候，需要到kaggle网站去下载数据集，但是速度很慢，就想到了使用代码下载，但是代码下载需要下载链接。所以就去找了找，发现我使用的谷歌浏览器可以提取到下载链接。步骤如下：

1.获取下载链接

选择需要下载的数据集，Download。

然后 Ctrl+j 弹出浏览器下载内容页面。找到正在下载的数据集，右键链接复制。

2.下载

更改url内容，运行程序即可

import wget

url = "https://storage.googleapis.com/kaggle-data-sets/1012/2343/bundle/archive.zip?X-Goog-Algorithm=GOOG4-RSA-SHA256&X-Goog-Credential=gcp-kaggle-com%40kaggle-161607.iam.gserviceaccount.com%2F20220601%2Fauto%2Fstorage%2Fgoog4_request&X-Goog-Date=20220601T094354Z&X-Goog-Expires=259199&X-Goog-SignedHeaders=host&X-Goog-Signature=0ce2a85259024cb6cc450f5f57d43058d65579ba34c74563f6759b44aa1f9bfe26ae31f5509db4ef126c313239cceb4209123fe53cb4917dd213b3b465b1be02c45755e62bd4baebc23b21d44d5d7bdd25de3f5b444a1c25079e69e8c542d11ae4dea3ef48647384d345f53758c737cd60c9708580cac39c5f1df79b62a22f98c922a963665ece602e05a301b8d02076a3d45e31d40b647b155e354d66e37f2aba4593f7e500c5a7e46551b92a5bba3eb72502dea39133fc910b37331fa1d4a09787ee875fefbc9707451fdd6c2e79e18ae6c09997933235e9b7d300cdbdc77d9041d39611df3fc03901e3cc7ef214766296395085b04adae9b45047d068650f"
output_filename = 'rps-test-set.zip'  # 文件名

# 下载到和.py同路径
wget.download(url, out=output_filename)

# 下载到其他路径
# out=路径+文件名
# out='./tmp/'+output_filename

然后就可以在路径中看到下载的文件了