【代码管理】Git之大瘦身

【问题】

很多小明同学啊,在写代码的时候,一不小心将测试的cnn模型或者测试视频放到仓库目录下,同时忘记了编写 .gitignore 文件忽略对应文件,然后将所有文件推到了公司代码服务器上,该代码仓库就瞬间爆炸了,本来最多就几MB的代码库,一下子甚至飙升到了几个GB的大小。其他同学再拉取代码的时候要好几分钟,严重影响各位同学写代码了,同时占据了大量的硬盘空间和代码服务器空间。

【解决】

一共分三步:

  1. 找到对应的大文件和提交历史;
  2. 删除大文件和修改提交历史;
  3. 重新推送代码仓库。

第一步:找到大文件

命令

git rev-list --objects --all | grep "$(git verify-pack -v .git/objects/pack/*.idx | sort -k 3 -n | tail -5 | awk '{print$1}')"

输出

c9853e631785727a7679b2179be356c9f268a97c
b9d121ead2c499b77fdaa10fc59f95cf2a41ca46 8.mp4

第二步:删除大文件

命令

git filter-branch -f --prune-empty --index-filter "git rm -rf --cached --ignore-unmatch 8.mp4" --tag-name-filter cat -- --all

输出

WARNING: git-filter-branch has a glut of gotchas generating mangled history
         rewrites.  Hit Ctrl-C before proceeding to abort, then use an
         alternative filtering tool such as 'git filter-repo'
         (https://github.com/newren/git-filter-repo/) instead.  See the
         filter-branch manual page for more details; to squelch this warning,
         set FILTER_BRANCH_SQUELCH_WARNING=1.
Proceeding with filter-branch...

Rewrite 463a9cb31ef1b6f0e67256b65c30a4ff9fb7d642 (3/7) (1 seconds passed, remaining 1 predicted)    rm '8.mp4'
Rewrite c9853e631785727a7679b2179be356c9f268a97c (3/7) (1 seconds passed, remaining 1 predicted)    rm '8.mp4'
Rewrite 2c1755a720639f55ebf93df5484b94b4b4380ef3 (3/7) (1 seconds passed, remaining 1 predicted)    rm '8.mp4'
Rewrite c30b0cb6bb4a6202d139a01a033255767ddd38ea (7/7) (2 seconds passed, remaining 0 predicted)
WARNING: Ref 'refs/heads/master' is unchanged
WARNING: Ref 'refs/heads/new' is unchanged
Ref 'refs/remotes/origin/master' was rewritten
WARNING: Ref 'refs/remotes/origin/new' is unchanged

第三步:推送仓库

命令

git push origin --force --all

输出

Total 0 (delta 0), reused 0 (delta 0), pack-reused 0
remote: Powered by GITEE.COM [GNK-6.4]
To gitee.com:hello/testgit.git
 + c30b0cb...cdf4f61 master -> master (forced update)

另外

提交完成后,请其他各位同学删除本地仓库,重新从服务器拉取代码,不要再推送了,要不然又要重新搞一遍。

【扩展】

  1. Windows PowerShell 下执行有关命令会出现问题
    git verify-pack -v .git/objects/pack/pack-c1a9c4b28655a4a0353d0fa4149a8579fd53de34.idx | sort -k 3 -n | tail -3

在这里插入图片描述
还是用回 git bash 不要用 Windows PowerShell

切换到 git bash
在这里插入图片描述

  1. 双引号不是单引号
    git filter-branch -f --prune-empty --index-filter "git rm -rf --cached --ignore-unmatch 8.mp4" --tag-name-filter cat -- --all 命令里是"git rm -rf --cached --ignore-unmatch 8.mp4" 而不是 'git rm -rf --cached --ignore-unmatch 8.mp4',否则会出现fatal: bad revision 'git rm --ignore-unmatch --cached 8.mp4'提示。

  2. git-count-objects - 计算解包的对象数量及其磁盘消耗量

  3. git-gc - 清理不必要的文件并优化本地存储库

【参考】

  1. progit https://git-scm.com/book/en/v2 P460~P464
  2. https://harttle.land/2016/03/22/purge-large-files-in-gitrepo.html
  3. https://cloud.tencent.com/developer/section/1138773
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

黄金旺铺

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值