C++实现简单的对象序列化 _ 字节流读写与结构体对齐处理【源码】

风萱君_2184

风萱君_2184

2026-04-08

678人浏览

原创

结构体直接 memcpy 序列化常出错,因编译器自动插入填充字节导致跨平台布局不一致;须用 #pragma pack(1) 或 alignas(1) 显式禁用对齐,并统一两端定义、处理字节序、避免非 pod 成员。

c++实现简单的对象序列化 _ 字节流读写与结构体对齐处理【源码】

结构体直接 memcpy 序列化为什么经常出错

因为默认情况下结构体成员会按编译器规则自动对齐,比如 int 对齐到 4 字节边界、double 到 8 字节,中间可能插入填充字节(padding)。你用 memcpy 把整个结构体 dump 出去,读取端若编译环境不同(如不同平台、不同编译器、甚至不同优化级别),填充位置和大小可能不一致,导致字段错位或读出垃圾值。

常见错误现象:sizeof(MyStruct) 比所有成员大小之和大;跨平台传输后 int 字段值变成负数或极大值;调试时发现某个 char 字段后面跳了 3 字节才到下一个 int。

  • 必须显式控制对齐,禁用默认 padding
  • 推荐用 #pragma pack(1) 或 alignas(1)(C++11 起),但注意 #pragma pack 是编译器扩展,gcc/clang 和 msvc 都支持,且作用域更明确
  • 不要只在定义处加 pack,序列化/反序列化两端的结构体定义必须完全一致(包括头文件包含顺序、宏定义状态)

如何安全地把结构体写入字节流并读回

核心是:保证内存布局可预测 + 显式处理字节序(endianness)。x86/x64 默认小端,但网络协议、文件格式通常要求大端(或固定端序),否则跨平台会翻车。

实操建议:

C++ Code Review Master
C++ Code Review Master

组合式C++代码评审方案,融合静态分析、AI推理、多轮迭代评审和C++专项检查,适用于PR审查、增量代码审查、全项目评审和代码质量评分,触发词包括review cpp、cpp代码评审、C++review、代码审查。

下载
  • 用 std::vector<uint8_t></uint8_t> 或 std::string 当缓冲区,避免裸指针和生命周期问题
  • 写入前用 htons/htonl(或 bswap_16/bswap_32)转为网络字节序;读取时用 ntohs/ntohl 转回主机序
  • 不要直接 reinterpret_cast(&s) 然后 write —— 必须确保 s 是 packed 的,且无虚函数、无非 POD 成员(如 std::string、std::vector)
  • 示例片段:
    #pragma pack(push, 1)
    struct Header {
        uint16_t magic;
        uint32_t len;
        uint8_t  version;
    };
    #pragma pack(pop)
    <p>// 写入
    Header h{htons(0x1234), htonl(1024), 1};
    buf.insert(buf.end(), reinterpret_cast<const uint8_t>>(&h), 
    reinterpret_cast<const uint8_t>>(&h) + sizeof(h));</const></const></p>

遇到 std::string 或 vector 怎么办

它们不能直接 memcpy —— 内存布局不固定,内部指针指向堆上数据。强行序列化只会保存指针值,反序列化后解引用必然崩溃。

正确做法是「扁平化」:把长度 + 实际内容分开处理。

  • 先写入长度(如 uint32_t size = static_cast<uint32_t>(s.size())</uint32_t>,注意字节序)
  • 再写入 s.data() 指向的字节(如果 s 非空)
  • 读取时先读长度,再 resize 字符串,再读对应字节数到 &s[0](C++11 起 std::string 支持 data() 可写)
  • 同理适用于 std::vector<t></t>,但要注意 T 必须是 trivially copyable 类型(如 int、float、char);若 T 含指针或虚函数,需逐个序列化

读写过程中怎么检测数据损坏或越界

裸字节流没有元信息,一旦写入长度错误、读取偏移错位,后续所有解析都会雪崩。不能依赖 try-catch(二进制解析失败通常不抛异常)。

  • 每次读操作前检查剩余缓冲区长度是否足够:if (pos + sizeof(T) > buf.size()) { /* error */ }
  • 写入前也校验:比如字符串长度超过 UINT32_MAX 就不该允许序列化
  • 关键字段加 magic number 和 checksum(如 CRC32),读取后验证;但注意 checksum 本身也要考虑字节序一致性
  • 调试时可用 assert 检查 offsetof(Struct, member) 是否符合预期,确认 pack 生效

最容易被忽略的是:结构体里嵌套另一个 packed 结构体时,外层 #pragma pack 不会自动传导,每个嵌套类型都得单独加 pack 控制;还有,类模板实例化(如 MyStruct<int></int>)若含对齐敏感成员,也得确保模板定义里处理了对齐。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

c++

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.02

5719

3

css中float用法
css中float用法

css中float属性允许元素脱离文档流并沿其父元素边缘排列,用于创建并排列、对齐文本图像、浮动菜单边栏和重叠元素。想了解更多float的相关内容,可以阅读本专题下面的文章。

2024.04.28

5927

8

C++中int、float和double的区别
C++中int、float和double的区别

本专题整合了c++中int和double的区别,阅读专题下面的文章了解更多详细内容。

2025.10.23

664

4

scripterror怎么解决
scripterror怎么解决

scripterror的解决办法有检查语法、文件路径、检查网络连接、浏览器兼容性、使用try-catch语句、使用开发者工具进行调试、更新浏览器和JavaScript库或寻求专业帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.18

929

5

500error怎么解决
500error怎么解决

500error的解决办法有检查服务器日志、检查代码、检查服务器配置、更新软件版本、重新启动服务、调试代码和寻求帮助等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.25

2620

5

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.03

1638

5

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.04

2444

5

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

2023.10.24

5904

49

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

2023.11.24

5209

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Conan 2 Essentials 免费课程
Conan 2 Essentials 免费课程

共0课时 | 0人学习

CMake 与 Conan 集成实践
CMake 与 Conan 集成实践

共0课时 | 0人学习

Conan 2 高级依赖模型介绍
Conan 2 高级依赖模型介绍

共0课时 | 0人学习