零成本高速下载huggingface大模型和数据集。
使用方法
- 先下载。
wget https://mirror.ghproxy.com/https://github.com/xieincz/huggingface-go/releases/latest/download/huggingface_go_linux_amd64
- 增加执行权限。
mv huggingface_go_linux_amd64 huggingface_go
chmod +x huggingface_go
- 使用方法: huggingface_go -u huggingface的模型/数据集链接 -f (可选)要保存的位置,可以是文件夹名字也可以是路径 -p (可选)代理链接,比如:
./huggingface_go -u https://huggingface.co/NousResearch/Llama-2-13b-hf -f /path/to/your/folder -p https://worker-share-proxy-01f5.xieincz.tk/
参考
https://xieincz.github.io/post/huggingface-go-jia-su-xia-zai-huggingface-de-mo-xing-he-shu-ju-ji/?