c++怎么将超大文件切割成等份_seekg与tellg精准定界【实战】

云明君_7495

云明君_7495

2026-04-01

360人浏览

原创

必须以二进制模式打开文件并用std::streamoff存储tellg结果,seekg前需clear(),最后一块须单独计算剩余字节数,读取后检查gcount()而非eof()。

c++怎么将超大文件切割成等份_seekg与tellg精准定界【实战】

用 seekg 和 tellg 切大文件前,先确认流是否支持随机访问

不是所有 C++ 文件流都能靠 seekg 精确定位 —— 只有以 std::ios::binary 模式打开的文件才保证 tellg 返回字节偏移、seekg 能跳转到任意位置。文本模式下换行符处理会干扰偏移计算,导致切割错位。

  • 必须用 std::ifstream file(path, std::ios::binary) 打开,否则 tellg 值不可信
  • 打开后立即调用 file.seekg(0, std::ios::end) 再 file.tellg() 获取总大小,避免因缓冲区未刷新而读小
  • Windows 下若用默认文本模式打开二进制文件,\r\n 可能被当作一个字符处理,tellg 返回值比实际字节数小

按字节均分时,tellg 的返回值必须是 std::streamoff,别用 int 或 size_t

tellg 返回的是 std::streamoff,它在 64 位系统上通常是 long long,但不保证和 size_t 兼容。用错类型会导致高位截断,超 2GB 文件切片位置直接崩掉。

  • 声明变量时写 std::streamoff total = file.tellg();,别写 int total = file.tellg();
  • 计算每份大小:用 std::streamoff chunk_size = total / n_parts;,除法本身没问题,但后续 seekg 参数也得是 std::streamoff
  • 循环中定位起点:用 file.seekg(i * chunk_size, std::ios::beg),其中 i 是 int 没问题,但乘积结果必须能存进 std::streamoff

最后一块总是不准?因为 total % chunk_size 的余数没处理

等分只是数学理想,文件总字节数往往不能被份数整除。如果硬按 chunk_size 循环读,最后一块要么少读(漏数据),要么越界(read 失败但不报错)。

C++ 算法竞赛自动化测试数据生成与校验框架
C++ 算法竞赛自动化测试数据生成与校验框架

根据原题生成新题面、验证器及完整测试数据,自动套用 testlib 模板,用于用户要求生成测试数据时。

下载
  • 正确做法:前 n-1 块固定读 chunk_size 字节;最后一块用 std::streamsize remaining = total - (n-1) * chunk_size; 算出真实长度
  • 读取时别只依赖 read(buf, size),要检查 file.gcount() —— 它返回实际读到的字节数,可能小于请求值(尤其是最后一块或磁盘 I/O 异常)
  • 不要用 eof() 判断结束,它只在尝试读失败后才置位;应以 gcount() == 0 为终止信号

用 seekg 跳转后,记得清错误标志再读

seekg 失败(比如跳到文件末尾之后)会设置 failbit,一旦流进入错误状态,后续所有 read 都静默失败。很多人切着切着发现某一块空了,就是这个原因。

  • 每次 seekg 后加一句 file.clear();,清除可能残留的错误标志
  • 检查 seekg 是否成功:if (!file.good()) { /* 处理定位失败 */ },而不是只看返回值(seekg 本身不返回状态)
  • 特别注意:从 std::ios::end 定位时,偏移量为负才合法,正偏移(如 seekg(100, std::ios::end))必然失败

真正麻烦的不是怎么切,而是每块读完后要不要 clear()、seekg 失败时怎么降级处理、以及跨平台下 streamoff 的符号扩展——这些细节不写进日志,出问题时根本看不出哪一行埋了雷。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

c++速学教程(入门到精通)
c++速学教程(入门到精通)

c++怎么学习?c++怎么入门?c++在哪学?c++怎么学才快?不用担心,这里为大家提供了c++速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

c++

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.02

5319

3

int占多少字节
int占多少字节

int占4个字节,意味着一个int变量可以存储范围在-2,147,483,648到2,147,483,647之间的整数值,在某些情况下也可能是2个字节或8个字节,int是一种常用的数据类型,用于表示整数,需要根据具体情况选择合适的数据类型,以确保程序的正确性和性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.08.29

2705

6

c++怎么把double转成int
c++怎么把double转成int

本专题整合了 c++ double相关教程,阅读专题下面的文章了解更多详细内容。

2025.08.29

3308

10

C++中int的含义
C++中int的含义

本专题整合了C++中int相关内容,阅读专题下面的文章了解更多详细内容。

2025.08.29

2365

10

go语言 数组和切片
go语言 数组和切片

本专题整合了go语言数组和切片的区别与含义,阅读专题下面的文章了解更多详细内容。

2025.09.03

1452

14

windows查看端口占用情况
windows查看端口占用情况

Windows端口可以认为是计算机与外界通讯交流的出入口。逻辑意义上的端口一般是指TCP/IP协议中的端口,端口号的范围从0到65535,比如用于浏览网页服务的80端口,用于FTP服务的21端口等等。怎么查看windows端口占用情况呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.26

3039

3

查看端口占用情况windows
查看端口占用情况windows

端口占用是指与端口关联的软件占用端口而使得其他应用程序无法使用这些端口,端口占用问题是计算机系统编程领域的一个常见问题,端口占用的根本原因可能是操作系统的一些错误,服务器也可能会出现端口占用问题。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.27

2598

6

windows照片无法显示
windows照片无法显示

当我们尝试打开一张图片时,可能会出现一个错误提示,提示说"Windows照片查看器无法显示此图片,因为计算机上的可用内存不足",本专题为大家提供windows照片无法显示相关的文章,帮助大家解决该问题。

2023.08.01

1428

3

windows查看端口被占用的情况
windows查看端口被占用的情况

windows查看端口被占用的情况的方法:1、使用Windows自带的资源监视器;2、使用命令提示符查看端口信息;3、使用任务管理器查看占用端口的进程。本专题为大家提供windows查看端口被占用的情况的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

2379

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Conan 2 Essentials 免费课程
Conan 2 Essentials 免费课程

共0课时 | 0人学习

CMake 与 Conan 集成实践
CMake 与 Conan 集成实践

共0课时 | 0人学习

Conan 2 高级依赖模型介绍
Conan 2 高级依赖模型介绍

共0课时 | 0人学习