如何使用 git filter-repo 或 BFG 彻底物理物理擦除误提交到 Git 历史记录中的数十兆大文件

轻磊君_9984

轻磊君_9984

2026-05-25

302人浏览

原创

核心是重写提交历史以物理删除大文件blob对象,git-filter-repo适合精准路径清理,BFG适合按大小批量清除,二者均需备份、强制推送并通知协作者重新克隆。

如何使用 git filter-repo 或 bfg 彻底物理物理擦除误提交到 git 历史记录中的数十兆大文件

要彻底物理擦除 Git 历史中误提交的数十兆大文件,核心是重写整个提交历史,让这些文件的 blob 对象从 .git/objects 中被真正删除(而非仅从工作区或最新提交中移除)。git-filter-repo 和 BFG Repo-Cleaner 都能做到这点,但操作逻辑、适用场景和安全性略有不同。下面分步骤说明关键实操要点。

一、先定位问题文件,避免盲目清理

不查清“谁在占空间”,直接开刀容易误伤。运行以下命令快速找出历史中最大的前 10 个 blob:

bash

git rev-list --objects --all | while read hash path; do size=$(git cat-file -s "$hash" 2>/dev/null); echo "$size $hash $path"; done | sort -n | tail -10

重点关注:
• *.mp4、*.zip、*.tar、*.dump 等二进制/归档文件
• dist/、build/、node_modules/、public/uploads/ 等目录路径
• 文件大小是否稳定在 10MB–200MB 区间(正好是“数十兆”的典型范围)

二、用 git-filter-repo 精准剔除指定文件或目录

适合已知路径、需保留其余历史结构、且希望操作可追溯的场景。注意:它会重写所有 commit hash,所以必须备份并通知协作者。

git摸鱼周报自动化
git摸鱼周报自动化

生成周报:读取本机 Git 仓库最近一周的提交记录,按项目分类提炼总结,生成标准周报格式,通过微信推送并返回给用户。触发词:周报、weekly report、git总结、提交记录总结、工作周报。

下载
  • 进入项目根目录后,不要直接在带远程 origin 的普通仓库里执行;推荐先创建裸镜像备份:
    git clone --mirror your-repo-url.git repo-backup
    cd repo-backup
  • 删单个文件(如 large-video.mp4):
    git filter-repo --path large-video.mp4 --invert-paths --force
  • 删整个目录(如 docs/assets/):
    git filter-repo --path docs/assets/ --invert-paths --force
  • 批量删多个路径(新建 remove-list.txt,每行一个路径):
    git filter-repo --paths-from-file remove-list.txt --invert-paths --force

三、用 BFG Repo-Cleaner 快速按大小批量清除

适合不知道具体路径、但确认存在大量“几十兆级”冗余文件的场景。BFG 不依赖 Python,纯 Java 运行,速度通常比 filter-repo 更快,尤其对超大仓库。

  • 下载并准备工具(以 Linux/macOS 为例):
    git clone https://gitcode.com/gh_mirrors/bf/bfg-repo-cleaner
    cd bfg-repo-cleaner && java -jar bfg.jar --version
  • 对镜像仓库执行清理(例如删所有 >30MB 的文件):
    java -jar bfg.jar --strip-blobs-bigger-than 30M my-repo.git
  • 也可只删最大的 N 个文件(更可控):
    java -jar bfg.jar --strip-biggest-blobs 5 my-repo.git
  • 清理后必须执行强制压缩:
    cd my-repo.git && git reflog expire --expire=now --all && git gc --prune=now --aggressive

四、清理后必须做的收尾动作

无论用哪个工具,以下三步缺一不可,否则文件仍可能残留或无法推送:

  • 验证体积是否真实下降:回到项目根目录,运行 du -sh .git(macOS/Linux)或 Get-ChildItem .git -Recurse | Measure-Object -Property Length -Sum(PowerShell),对比清理前后大小
  • 强制推送到远程(覆盖旧历史):
    git push --force --all origin
    git push --force --tags origin
  • 通知所有协作者重新克隆:他们不能再用旧本地仓库继续工作,必须 git clone 新地址,否则会出现引用错乱、重复提交等问题

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

git

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
自建git服务器
自建git服务器

git服务器是目前流行的分布式版本控制系统之一,可以让多人协同开发同一个项目。本专题为大家提供自建git服务器相关的各种文章、以及下载和课程。

2023.07.05

6659

9

git和svn的区别
git和svn的区别

git和svn的区别:1、定义不同;2、模型类型不同;3、存储单元不同;4、是否拥有全局版本号;5、内容完整性不同;6、版本库不同;7、克隆目录速度不同;8、分支不同。php中文网为大家带来了git和svn的相关知识、以及相关文章等内容。

2023.07.06

1900

6

git撤销提交的commit
git撤销提交的commit

Git是一个强大的版本控制系统,它提供了很多功能帮助开发人员有效地管理和控制代码的变更,本专题为大家提供git 撤销提交的commit相关的各种文章内容,供大家免费下载体验。

2023.07.24

1114

5

git提交错误怎么撤回
git提交错误怎么撤回

git提交错误撤回的方法:git reset head^:撤回最后一次提交,恢复到提交前状态。git revert head:创建新提交,内容与之前提交相反。git reset :使用提交的 sha-1 哈希撤回指定提交。交互式舞台区:标记要撤回的特定更改,然后提交,排除已撤回更改。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.09

4337

7

git怎么对比两个版本的文件内容
git怎么对比两个版本的文件内容

要对比两个版本的 git 文件,请使用 git diff 命令:git diff 比较工作树和暂存区之间的差异。git diff 比较两个提交或标签之间的差异。git diff 输出显示差异块,其中 + 表示添加的行,- 表示删除的行, 表示修改的行。可使用 gitkraken、meld、beyond compare 等可视化工具更直观地查看差异。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.09

4141

6

Docker容器化部署与DevOps实践
Docker容器化部署与DevOps实践

本专题面向后端与运维开发者,系统讲解 Docker 容器化技术在实际项目中的应用。内容涵盖 Docker 镜像构建、容器运行机制、Docker Compose 多服务编排,以及在 DevOps 流程中的持续集成与持续部署实践。通过真实场景演示,帮助开发者实现应用的快速部署、环境一致性与运维自动化。

2026.02.11

299

16

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

2026.10.22

60

11

Gradle Wrapper配置教程
Gradle Wrapper配置教程

本专题介绍Gradle Wrapper的基本作用,涵盖文件组成、生成方法、版本配置和任务调用,帮助你理解项目如何使用指定的Gradle版本,减少不同开发环境带来的构建差异。

2026.10.22

40

10

Golangci-lint检查器使用教程
Golangci-lint检查器使用教程

本专题整理Golangci-lint常用Linters的用途与配置方法,覆盖错误处理、无效代码、安全、复杂度、命名和依赖检查,帮助项目合理选规则。

2026.10.22

40

15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
vscode手册
vscode手册

共0课时 | 0人学习

Git 教程
Git 教程

共21课时 | 8.1万人学习

Git版本控制工具
Git版本控制工具

共8课时 | 1.9万人学习