c++如何将复杂的跨对象引用结构整体序列化为二进制持久化镜像【实战】

千敏酱_2534

千敏酱_2534

2026-04-03

156人浏览

原创

直接用 std::ofstream 写 raw memory 会崩溃,因为虚表指针、指针成员、std::string 或 std::vector 的内部堆地址不可跨进程/时间复用,直接 write() 含指针 struct 会导致读取时解引用段错误。

c++如何将复杂的跨对象引用结构整体序列化为二进制持久化镜像【实战】

直接用 std::ofstream 写 raw memory 会崩溃,为什么?

因为 C++ 对象内存布局不等于可序列化镜像:虚表指针、指针成员、std::string 或 std::vector 内部堆地址全不可跨进程/跨时间复用。直接 write() 一个含指针的 struct,读取时解引用必然段错误。

常见错误现象:Segmentation fault、读出乱码、std::bad_alloc(反序列化时 new 失败)、对象字段值异常(如 size=18446744073709551615)。

实操建议:

C++ 算法竞赛自动化测试数据生成与校验框架
C++ 算法竞赛自动化测试数据生成与校验框架

根据原题生成新题面、验证器及完整测试数据,自动套用 testlib 模板,用于用户要求生成测试数据时。

下载
  • 必须区分「数据」和「引用」——所有指针/智能指针/容器都需显式序列化其指向内容,而非地址本身
  • 禁止对含虚函数的类做 memcpy-style 序列化;若要用,得先 static_assert(!std::is_polymorphic_v<t>)</t>
  • 优先使用「自描述结构」:在二进制开头写版本号、总长度、对象数量等元信息,便于后续兼容与调试

用 boost::serialization 处理跨对象指针引用

它能自动识别重复指针(比如 A→B、C→B),只序列化 B 一次,并在反序列化时重建相同地址关系。但默认不启用,需显式标记。

使用场景:有 std::shared_ptr<node></node>、Node*、或循环引用(A→B→A)的图状结构。

实操建议:

  • 每个参与序列化的类必须定义 serialize(Archive&, unsigned) 成员函数,并用 ar & member; 逐字段注册
  • 对裸指针,必须用 ar & BOOST_SERIALIZATION_NVP(ptr); 且确保生命周期由序列化框架管理(推荐改用 shared_ptr)
  • 开启跟踪支持:在类定义后加 BOOST_CLASS_TRACKING(T, boost::serialization::track_always),否则重复指针会被多次序列化
  • 二进制归档需用 boost::archive::binary_oarchive + std::ofstream(..., std::ios::binary),缺 std::ios::binary 会导致 Windows 下换行符被篡改

手写序列化时如何处理 std::vector<:shared_ptr>></:shared_ptr> 的嵌套层级

不能只写 vector.size() 然后 for 循环 write(reinterpret_cast<char>(&ptr), sizeof(ptr))</char>——那只是序列化了智能指针控制块地址,毫无意义。

正确做法是把「对象树」转为「对象平面列表 + 引用映射表」:

  • 第一遍遍历:收集所有可达对象(用 std::set<const void></const> 去重),分配唯一 ID(如 0,1,2…),存入 std::map<const void uint32_t> id_map</const>
  • 第二遍序列化:先写 ID 总数,再按 ID 顺序写每个对象的原始数据(不含指针字段),对每个指针字段只写其目标 ID(uint32_t)
  • 反序列化时:先读所有对象数据到临时缓冲区,构建 ID→新对象指针映射;再扫一遍,用 ID 查表填充指针字段
  • 注意 std::shared_ptr 的控制块无法手动重建,必须用 std::make_shared 创建后,再通过 std::static_pointer_cast 转型

性能关键点:避免 std::string 频繁小内存分配

序列化 10 万个含 std::string 的对象时,如果每字符串单独 write(len); write(data),会产生大量小 IO 和内存碎片。

实操建议:

  • 预估总字符串长度,一次性 malloc 一块大 buffer,用偏移量写入(类似 arena allocator)
  • 字符串字段统一改为「长度前缀 + 数据」格式,长度用 uint32_t(别用 size_t,跨 32/64 位平台不兼容)
  • 禁用 std::string 的 SSO(small string optimization)干扰:序列化前调用 s.reserve(s.size()) 强制走堆内存,保证 s.data() 总有效
  • 若允许牺牲一点空间换速度,可用 std::string_view 仅作序列化中间视图,但反序列化仍需 new 出真实 std::string

跨对象引用结构的序列化难点不在“怎么写”,而在“怎么定义对象边界”和“谁负责释放”。哪怕用了 boost::serialization,一旦混用裸指针和智能指针,或忘记 track_always,镜像就不可靠。二进制持久化不是快照,是契约——结构变、版本号必须升,否则读出来的是静默错误。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

c++速学教程(入门到精通)
c++速学教程(入门到精通)

c++怎么学习?c++怎么入门?c++在哪学?c++怎么学才快?不用担心,这里为大家提供了c++速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

c++

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.02

5499

3

c语言const用法
c语言const用法

const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

2023.09.20

1998

7

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.03

1598

5

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.04

2364

5

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

2023.10.24

5864

49

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

2023.11.24

5049

6

java读取文件转成字符串的方法
java读取文件转成字符串的方法

Java8引入了新的文件I/O API,使用java.nio.file.Files类读取文件内容更加方便。对于较旧版本的Java,可以使用java.io.FileReader和java.io.BufferedReader来读取文件。在这些方法中,你需要将文件路径替换为你的实际文件路径,并且可能需要处理可能的IOException异常。想了解更多java的相关内容,可以阅读本专题下面的文章。

2024.03.22

6774

16

php中定义字符串的方式
php中定义字符串的方式

php中定义字符串的方式:单引号;双引号;heredoc语法等等。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

2024.04.29

9274

11

go语言字符串相关教程
go语言字符串相关教程

本专题整合了go语言字符串相关教程,阅读专题下面的文章了解更多详细内容。

2025.07.29

4699

17

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Conan 2 Essentials 免费课程
Conan 2 Essentials 免费课程

共0课时 | 0人学习

CMake 与 Conan 集成实践
CMake 与 Conan 集成实践

共0课时 | 0人学习

Conan 2 高级依赖模型介绍
Conan 2 高级依赖模型介绍

共0课时 | 0人学习