使用 io.Copy() 复制时稀疏文件仍然很大
使用 io.Copy() 复制稀疏文件时,它们意外地变成目的地较大。可以采取什么措施来防止这种情况?
背景
io.Copy() 传输原始字节,不知道稀疏文件属性。稀疏文件可以有效存储,但数据中存在漏洞。 io.Copy() 无法传达此洞信息,导致复制过程中稀疏性丢失。
解决方案
要解决此问题,需要绕过io.Copy() 并直接使用系统调用包。具体方法如下:
- 检测空洞:使用 lseek(2) 中的 SEEK_HOLE 和 SEEK_DATA 特殊值来定位稀疏文件中的空洞和数据区域。
- 自定义查找值:特定于平台的 SEEK_HOLE 和 SEEK_DATA 值是必需的。确定支持平台的这些值。
- 修改读取模式:识别包含数据的区域并从中读取数据。
- 考虑文件打孔: 在 Linux 上,您可以尝试使用 Fallocate(2) 在目标文件的末尾打一个洞。如果不支持,请写入归零块来模拟空洞。
其他注意事项
- 文件系统支持:并非所有文件系统都支持孔,例如 FAT32。检查目标文件系统是否支持漏洞。
- 源和目标差异:验证源和目标文件是否驻留在同一文件系统上。如果是这样,请考虑使用 syscall.Rename() 或 os.Rename() 来移动文件而不进行复制。
有关更多见解,请参阅有关在 tar 存档中写入稀疏文件的 Go 问题 #13548 .
以上是## 为什么稀疏文件用 io.Copy() 复制时会变大?的详细内容。更多信息请关注PHP中文网其他相关文章!

本文演示了创建模拟和存根进行单元测试。 它强调使用接口,提供模拟实现的示例,并讨论最佳实践,例如保持模拟集中并使用断言库。 文章

本文探讨了GO的仿制药自定义类型约束。 它详细介绍了界面如何定义通用功能的最低类型要求,从而改善了类型的安全性和代码可重复使用性。 本文还讨论了局限性和最佳实践

本文使用跟踪工具探讨了GO应用程序执行流。 它讨论了手册和自动仪器技术,比较诸如Jaeger,Zipkin和Opentelemetry之类的工具,并突出显示有效的数据可视化

本文讨论了GO的反思软件包,用于运行时操作代码,对序列化,通用编程等有益。它警告性能成本,例如较慢的执行和更高的内存使用,建议明智的使用和最佳

本文讨论了GO中使用表驱动的测试,该方法使用测试用例表来测试具有多个输入和结果的功能。它突出了诸如提高的可读性,降低重复,可伸缩性,一致性和A

本文讨论了通过go.mod,涵盖规范,更新和冲突解决方案管理GO模块依赖关系。它强调了最佳实践,例如语义版本控制和定期更新。


热AI工具

Undresser.AI Undress
人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool
免费脱衣服图片

Clothoff.io
AI脱衣机

AI Hentai Generator
免费生成ai无尽的。

热门文章

热工具

MinGW - 适用于 Windows 的极简 GNU
这个项目正在迁移到osdn.net/projects/mingw的过程中,你可以继续在那里关注我们。MinGW:GNU编译器集合(GCC)的本地Windows移植版本,可自由分发的导入库和用于构建本地Windows应用程序的头文件;包括对MSVC运行时的扩展,以支持C99功能。MinGW的所有软件都可以在64位Windows平台上运行。

DVWA
Damn Vulnerable Web App (DVWA) 是一个PHP/MySQL的Web应用程序,非常容易受到攻击。它的主要目标是成为安全专业人员在合法环境中测试自己的技能和工具的辅助工具,帮助Web开发人员更好地理解保护Web应用程序的过程,并帮助教师/学生在课堂环境中教授/学习Web应用程序安全。DVWA的目标是通过简单直接的界面练习一些最常见的Web漏洞,难度各不相同。请注意,该软件中

SecLists
SecLists是最终安全测试人员的伙伴。它是一个包含各种类型列表的集合,这些列表在安全评估过程中经常使用,都在一个地方。SecLists通过方便地提供安全测试人员可能需要的所有列表,帮助提高安全测试的效率和生产力。列表类型包括用户名、密码、URL、模糊测试有效载荷、敏感数据模式、Web shell等等。测试人员只需将此存储库拉到新的测试机上,他就可以访问到所需的每种类型的列表。

WebStorm Mac版
好用的JavaScript开发工具

SublimeText3 Linux新版
SublimeText3 Linux最新版