Git学习之LFS 如何下载git的大文件

已于 2023-12-01 22:30:29 修改
阅读量1.2k 收藏 5
点赞数 11
文章标签： git 学习
于 2023-12-01 22:26:54 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/q1457797371/article/details/134745047
版权

mac
安装 homebrew
brew install git-lfs
git lfs install 
linux

Centos

curl -s https://packagecloud.io/install/repositories/github/git-lfs/script.rpm.sh | sudo bash
sudo yum install git-lfs
git lfs install 
Ubuntu

1. curl -s https://packagecloud.io/install/repositories/github/git-lfs/script.deb.sh | sudo bash
2. sudo apt-get install git-lfs
3. git lfs install 

下载阿里的大模型

git clone https://www.modelscope.cn/qwen/Qwen-7B-Chat.git

git lfs pull

llm大模型算法工程师weng
关注
  • 11
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
GIT LFS 大文件
02-19
Git LFS（Large File Storage）是Git的一个扩展系统，专门设计用于处理大型文件。在Git的传统操作中，大型文件可能导致仓库变得庞大，拉取和推送速度慢，这在团队协作和版本控制中可能会成为问题。Git LFS通过将大型...
Git lfs 使用教程（下载[clone]）
qq_40459275的博客
07-12 4191
安装： Git 命令行 Git命令行官网下载：https://git-scm.com/downloads（按照提示安装）注意在 Configuring the line ending conventions 页面选择 Check out as-is , Commit as-is -------------------------------------------------------------------------------------------------TortoisGit
使用Git LFS下载大文件到本地(Linux)
K_Kelly_的博客
07-17 2937
很多时候我们想要从huggingface中下载模型文件,若直接clone往往下载不完全.下载文件后可通过以下命令来查看该文件各个文件的大小ls -lh如下图，第一行total显示整个目录的文件大小，下面即为每个文件的大小尤其是对于GB级文件而言,很多时候都无法完全clone,且由于直接git会不稳定,因此引出Git LFS.Git LFS是一个GitHub开发的Git扩展,主要用于实现对大文件的支持。
git 大文本上传和下载git-lfs
最新发布
qq_28723681的博客
06-13 381
git -lfs 安裝
Git 服务器上的 LFS 下载
prinTao的博客
11-12 2267
以llama为例： https://huggingface.co/meta-llama/Llama-2-7b-hf 报错 找国内镜像 1 报错 注意 报错，查看： 因此： 使用，报错： 原因：报错： https://gitee.com/hf-models/Llama-2-7b-hf/tree/mainhttps://blog.shipengx.com/archives/af0e9080.htmlhttps://zhuanlan.zhihu.com/p/350011379
git相关教程 - 详细版（一）
IT菜鸟
05-01 5230
一、相关介绍 1.1 git免密clone linux下ssh公钥验证的设置和远程登录 1.1.1 客户端操作 ssh-keygen -t [rsa|dsa] 在目录 /home/yoyo/.ssh/id_rsa 将会生成 密钥文件 和 私钥文件 id_rsa，id_rsa.pub 或 id_dsa，id_dsa.pub。 将 .pub 文件复制到git服务器的 /root/.ssh 目录下。 1.1.2 服务端操作 服务器端 /root/.ssh/ 目录下执行命令。 # 添加密钥 cat id_dsa.
如何下载github上用git-lfs工具下载的大文件
weixin_42601608的博客
02-12 4081
要下载 GitHub 上使用 Git LFS 工具存储的大文件，您可以进行以下步骤： 安装 Git LFS：如果您的系统上没有安装 Git LFS，请先安装它。可以通过终端或命令行进行安装。 克隆存储库：使用以下命令克隆项目存储库到本地： git clone https://github.com/user/repo.git 下载大文件：进入存储库目录，并使用以下命令下载大文件： gi...
[工具环境] pip&git lfs下载命令
chenyang2203的博客
05-26 1371
由于模型文件比较大，可以先下载指针文件，然后再下载lfs文件，这样可以实时显示下载速度和进度。中存放，可以通过git lfs进行下载。查看是否安装，如未安装可参考。目前大部分开源大模型都在。
git lfs使用（huggingface下载大模型文件）
热门推荐
flyingluohaipeng的博客
05-21 2万+
最近在看BLOOM，但是Huggingface的仓库里除了我想要的pytoch_model_xxxxx.bin,放了一些别的格式的checkpoints，全部下载的话太大了，而且很慢很慢。需要注意，GIT_LFS_SKIP_SMUDGE=1和后面的git clone必须在同一行才能生效，表示不下载大文件（小文件、大文件的区分依据是有没有使用git lfs）。此时git会下载所有的小文件，比如tokenizer.json ，但是对于git lfs存储的大文件，只会存储一个文本的pointer file.
git-lfs-server：Git LFS服务器
02-03
3. 当其他用户从Git仓库克隆或拉取时，Git LFS客户端会检测到指针文件，然后自动从LFS服务器下载对应的大文件。 4. 如果开发者修改了大文件，Git LFS客户端会更新服务器上的文件，并更新本地的指针。 标签"git lfs ...
Git Clone大文件工具
04-07
5. 克隆仓库：其他人想要克隆你的仓库时，他们首先会克隆常规的Git数据，然后Git LFS会自动从服务器下载大文件，这样即使文件很大，克隆过程也不会因为网络问题而中断。 Git LFS的优势在于： 1. 节省存储：仅在本地...
git-lfs：Git扩展，用于对大文件进行版本控制
02-04
Git大文件存储 是用于使用Git管理大型文件的命令行扩展和。 客户端是用Go编写的，具有可用于Mac，Windows，Linux和FreeBSD的预编译二进制文件。 请访问该以获取功能概述。 入门 正在下载 您可以通过几种不同的方式...
git-lfs-windows-v3.2.0.exe
09-14
git-lfs-windows-v3.2.0.exe
git lfs下载指定文件git lfs pull --include=“*.bin“
kewei chen
06-12 2407
【代码】git lfs下载指定文件git lfs pull --include="*.bin"
如何用Git-LFS上传与下载大文件资源
HITzwx的博客
01-09 1500
4.1假设我们上传的是E盘中第一个文件夹里的文件。3.2点击Your repositories。3.4填写项目名称，描述，并添加README。在Anaconda Prompt输入命令。先进入到上传项目所在的路径，输入命令。这时再查看仓库，进入master分支。3.1进入个人主页，点击右上角头像。打开Anaconda Prompt。注意需要代理，国内网很可能上传失败。项目创建好，复制一下HTTP地址。假设下载到D盘第一个文件夹里。然后输入以下命令即可。
记录 | git拉取LFS大文件
极智视界
01-23 1718
记录 | git拉取LFS大文件
要Git的文件太大，如何使用Git-LFS
m0_52848925的博客
06-09 4030
LFS的路径就在D:\Program Files\Git\mingw64\bin，其中D:\Program Files\Git是Git的安装目录。我们想要单独下载大文件，而非大小文件一起下载，所以这里禁用。禁用之后再git clone，则只会下载没有使用LFS的小文件；而对LFS存储的大文件，只会存储一个文本的pointer file，而非实质性的数据，这样就可以避免git clone等半天下载不完（而且看不到大文件的下载进度）了。如果某个文件是用LFS上传Git的文件，则说明它是大文件。
Git LFS（大文件存储）教程
tip2tip的博客
04-11 1379
Git LFS（Large File Storage）是由 Atlassian, GitHub 以及其他开源贡献者开发的 Git 扩展，它通过延迟地（lazily）下载大文件的相关版本来减少大文件在仓库中的影响，具体来说，大文件是在 checkout 的过程中下载的，而不是 clone 或 fetch 过程中下载的（这意味着你在后台定时 fetch 远端仓库内容到本地时，并不会下载大文件内容，而是在你 checkout 到工作区的时候才会真正去下载大文件的内容）。
git lfs下载超大文件
08-08
2. 进入你要下载文件的存储库目录，使用命令`git lfs pull`来下载大文件。这个命令会自动从Git LFS服务器下载大文件，并将其保存到相应的位置。 3. 如果你只需要下载特定的文件，可以使用`git lfs pull --include ...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

llm大模型算法工程师weng

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值