如果有碰到huggingface的数据集下载慢,可以使用国内镜像代理下载,首先打开命令行,输入下面的环境变量:
然后执行你自己的代码,比如:
你会发现数据集的下载速度变快了:
参考文献
How do I save a Huggingface dataset?
如果有碰到huggingface的数据集下载慢,可以使用国内镜像代理下载,首先打开命令行,输入下面的环境变量:
然后执行你自己的代码,比如:
你会发现数据集的下载速度变快了:
How do I save a Huggingface dataset?