问题:要Git的文件太大,git太慢容易中断
解决:使用Git-LFS,LFS原理这里不详说了
-
版本新一点的Git已经集成了Git-LFS,不用单独去下载。LFS的路径就在D:\Program Files\Git\mingw64\bin,其中D:\Program Files\Git是Git的安装目录。
-
如何用Git-LFS clone:
1、先打开一个文件夹,d:\Desktop\新建文件夹,cmd进入它(那么之后Git下来的东西就会存到这个文件加里)
2、在cmd里输入:
d:\Desktop\新建文件夹> git lfs install Git LFS initialized. d:\Desktop\新建文件夹> set GIT_LFS_SKIP_SMUDGE=1 d:\Desktop\新建文件夹> git clone <https://huggingface.co/stabilityai/stable-diffusion-2-base>
如果某个文件是用LFS上传Git的文件,则说明它是大文件。set GIT_LFS_SKIP_SMUDGE=1的意思是禁用Git-LFS的自动下载和替换功能(每次进入cmd都要重新设置,不然就是未设置的状态)。禁用之后再git clone,则只会下载没有使用LFS的小文件,对于LFS存储的大文件,只会存一个文本的pointer file,而非实质性的数据,这样下载速度就快了。事后,我们可以手动下载大文件,而非大小文件一起用git下载,这样就不会相互耽搁下载进度,也能随时看到文件的下载进度。
然后可以手动一个一个下载其它需要的大模型。
也可以这样:比如现在需要下载所有pytorch.bin,则:d:\Desktop\MultiDiffusion-master> cd stable-diffusion-2-base d:\Desktop\MultiDiffusion-master\stable-diffusion-2-base> git lfs pull --include="*.bin"
-
参考:git lfs使用(huggingface下载大模型文件)_git lfs下载大文件_cv_lhp的博客-CSDN博客