C++实现文件切片与合并 _ 二维码二进制流分段读写【源码】

陌伟酱_3589

陌伟酱_3589

2026-04-10

376人浏览

原创

正确做法是用 ifstream/ofstream 配合固定大小缓冲区(如8192)循环读写,检查 read() 实际读取字节数,切片命名用定宽序号(如slice_0001.bin),合并前排序文件名并校验SHA-256。

c++实现文件切片与合并 _ 二维码二进制流分段读写【源码】

用 fstream 按固定大小切分大文件,别直接 read() 到 std::string

大文件(比如几百 MB 的二维码二进制流)切片时,常见错误是把整块数据读进 std::string 或 std::vector 再写入子文件——内存爆掉或性能骤降。正确做法是用 std::ifstream 和 std::ofstream 配合缓冲区循环读写,不加载全文到内存。

关键点:

  • read() 返回值必须检查:它可能少于请求字节数(尤其接近 EOF 时),不能假设“调用一次就满
  • 缓冲区大小建议设为 8192 或 65536(2 的幂),避开磁盘页边界问题
  • 切片命名推荐带序号和总片数,如 data_0001_of_0012.bin,方便合并时排序
std::ifstream src("qrcode.bin", std::ios::binary);
char buf[8192];
int slice_idx = 0, slice_size = 1024 * 1024; // 1MB per slice
while (src.good()) {
    src.read(buf, sizeof(buf));
    size_t n = src.gcount();
    if (n == 0) break;
<pre class="brush:php;toolbar:false;">std::ofstream dst("slice_" + std::to_string(++slice_idx) + ".bin", std::ios::binary);
dst.write(buf, n);
dst.close();

}

合并时按文件名自然序读取,别依赖 readdir() 返回顺序

Linux/macOS 下 readdir() 不保证文件名有序;Windows 的 FindFirstFile 同样不可靠。如果切片文件名是 slice_1.bin、slice_10.bin、slice_2.bin,直接遍历目录会先读 1、再 10、再 2,导致二进制流错乱。

实操建议:

  • 切片时强制用定宽数字命名(如 slice_0001.bin),位数根据总片数预估
  • 合并前用 std::vector<:string> 收集所有匹配文件名,再用 std::sort 排序(基于字符串本身即可,因已定宽)
  • 不要用 std::filesystem::directory_iterator 边遍历边合并——C++17 标准不保证顺序,且部分旧编译器没实现

二维码二进制流对完整性极度敏感,合并后必须校验 SHA-256

二维码解码失败常不是算法问题,而是切片/合并过程引入了空字节、截断或偏移。尤其注意:

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载
  • ofstream 默认不加 std::ios::binary 标志 → Windows 下会把 \x0A 转成 \x0D\x0A,破坏原始二进制
  • 切片最后一块若不足指定大小,仍要原样写入(不能补零),否则解码器收到多余字节会失败
  • 合并完成后立刻计算源文件与合成文件的 SHA256 哈希,二者必须完全一致——这是唯一可信的完整性判断依据

可用 OpenSSL 的 C++ 封装或简易 SHA-256 实现(如 sha256.h 单头库),别用 CRC32 —— 它无法检测小范围重复或重排。

跨平台路径拼接要用 std::filesystem::path,别手拼 "./slices/" + name

硬编码 / 或 \ 在 Windows 和 Linux 下都会出问题;用 + 拼接 std::string 易忽略路径分隔符逻辑。C++17 的 std::filesystem::path 是唯一稳妥方案。

  • 构造路径用 fs::path dir = "slices"; fs::path p = dir / "slice_0001.bin";
  • 检查文件存在用 fs::exists(p),比 std::ifstream(p.string()).is_open() 更可靠
  • 注意:MSVC 19.20+、GCC 9+、Clang 10+ 才完整支持,老环境需回退到 Boost.Filesystem 或手动处理分隔符

切片和合并逻辑本身不复杂,真正卡住人的永远是边界情况:最后一片读不满、路径斜杠、二进制换行、哈希没校验。把这些点盯死,比堆砌花哨 API 管用得多。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

c++

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.02

7499

3

sort排序函数用法
sort排序函数用法

sort排序函数的用法:1、对列表进行排序,默认情况下,sort函数按升序排序,因此最终输出的结果是按从小到大的顺序排列的;2、对元组进行排序,默认情况下,sort函数按元素的大小进行排序,因此最终输出的结果是按从小到大的顺序排列的;3、对字典进行排序,由于字典是无序的,因此排序后的结果仍然是原来的字典,使用一个lambda表达式作为key参数的值,用于指定排序的依据。

2023.09.04

1158

7

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.03

1918

5

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.04

3164

5

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

2023.10.24

6384

49

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

2023.11.24

6529

6

java读取文件转成字符串的方法
java读取文件转成字符串的方法

Java8引入了新的文件I/O API,使用java.nio.file.Files类读取文件内容更加方便。对于较旧版本的Java,可以使用java.io.FileReader和java.io.BufferedReader来读取文件。在这些方法中,你需要将文件路径替换为你的实际文件路径,并且可能需要处理可能的IOException异常。想了解更多java的相关内容,可以阅读本专题下面的文章。

2024.03.22

8074

16

php中定义字符串的方式
php中定义字符串的方式

php中定义字符串的方式:单引号;双引号;heredoc语法等等。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

2024.04.29

12494

11

go语言字符串相关教程
go语言字符串相关教程

本专题整合了go语言字符串相关教程,阅读专题下面的文章了解更多详细内容。

2025.07.29

6499

17

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

C++ Reference
C++ Reference

共0课时 | 0人学习

C++ 官方标准说明
C++ 官方标准说明

共0课时 | 0人学习