C++ 怎么编写一个支持多线程并发读写的分布式共享内存(Distributed Shared Memory)系统

陌丽小哥_6198

陌丽小哥_6198

2026-10-26

488人浏览

原创

C++标准库和Boost.Interprocess均不支持分布式共享内存(DSM),仅适用于单机进程间通信;因二者依赖本地内核对象与内存映射,缺乏跨网络一致性协议、故障恢复及缓存同步机制。

c++ 怎么编写一个支持多线程并发读写的分布式共享内存(distributed shared memory)系统

直接说结论:C++ 标准库不提供分布式共享内存(DSM)的实现,也没有现成的「开箱即用」方案;你无法仅靠 std::thread、std::shared_mutex 或 boost::interprocess 构建真正的分布式(跨机器)共享内存——它们只解决单机进程间共享,不处理网络、一致性、故障恢复等核心问题。

为什么 std::shared_mutex 和 boost::interprocess 不适用于分布式场景

这两个常被误用的工具,本质都是基于本地内存映射或内核对象(如 POSIX shared memory、Windows file mapping),依赖同一台机器的 MMU 和内核调度。一旦涉及多台机器:

  • std::shared_mutex 的锁状态完全驻留在本地内存,其他节点根本看不到,更谈不上同步
  • boost::interprocess::mapped_file 或 shared_memory_object 只能在本机进程间共享,跨机器时文件路径/句柄无意义
  • 没有自动的缓存一致性协议(如 MESI)、没有失效广播机制、没有网络分区容忍逻辑

真正可行的替代路径:用 RDMA + 用户态协议栈模拟 DSM 语义

如果你确实需要低延迟、近似共享内存的编程模型(比如 HPC 或金融高频场景),目前工业界实际做法是绕过 TCP/IP 栈,走硬件加速路径:

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载
  • 依赖支持 RDMA 的网卡(Mellanox ConnectX、NVIDIA BlueField),用 libibverbs 或 rdma-core API 直接读写远端内存(ibv_post_send + IB_WR_RDMA_WRITE)
  • 自己实现简单的线性地址空间映射:把远端机器的某段内存注册为「远程共享页」,本地通过指针偏移+节点 ID 解析物理位置
  • 读写并发控制必须自己做:不能依赖 std::atomic,因为远端原子操作需配合 IB_WR_ATOMIC_CMP_AND_SWP 等原语,且要处理重试和乱序
  • 典型陷阱:RDMA 写不保证远端 CPU cache 一致性——你需要显式调用 clflushopt 或 _mm_clflush 配合 fence,否则可能读到脏数据

更务实的选择:用成熟 DSM 库封装网络细节

从零造轮子风险极高,多数项目应优先评估已有工程化实现:

  • UPC++(伯克利开发):C++11 接口,底层用 GASNet,支持 MPI/RDMA/sockets 多种传输,提供 upcxx::global_ptr 模拟远端指针,读写自动路由到目标节点
  • GASNet-EX:UPC++ 的通信后端,提供 gasnet_put_bulk/gasnet_get_nb 等非阻塞原语,可嵌入自定义同步逻辑
  • 避坑提醒:OpenSHMEM 虽然名字带 SHMEM,但其实质是 PGAS(Partitioned Global Address Space)模型,不是透明共享内存——每个节点仍需显式调用 shmem_int_get,且不保证强一致性,默认 relaxed ordering
  • 别碰 Memcached 或 Redis:它们是 KV 存储,不是内存语义;没有指针运算、没有字节级寻址、序列化开销大,和 DSM 的设计目标相悖

真正难的从来不是“怎么写一个 read() 和 write() 函数”,而是如何让 64 个节点在断网、丢包、CPU 崩溃时仍保持内存视图的一致性——这部分没法靠 C++ 语法解决,得靠 Paxos、Raft 或专用硬件协议。动手前先想清楚:你真的需要 DSM,还是只需要分布式键值存储或消息队列?

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
c++和c语言的区别有哪些
c++和c语言的区别有哪些

c++和c语言的区别:1、面向对象编程(OOP)支持不同;2、新增特性不同;3、标准库不同;4、编译方式不同;5、命名空间不同等等。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.14

2268

9

c++和python学习顺序推荐
c++和python学习顺序推荐

一般建议先学习C++,再学习Python,因为这样可以逐步从较为底层的编程语言向更高级的语言过渡。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

1039

6

python和c++学习性价比分析
python和c++学习性价比分析

Python易于学习,广泛应用于Web开发、数据科学和人工智能等领域,但性能较低。C语言性能高,适用于对性能要求较高的场景,如游戏开发和系统编程,但学习曲线陡峭,错误处理复杂。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

447

5

c语言和c++一样吗
c语言和c++一样吗

c语言和c++是两种不同的编程语言,虽然有相似之处,但存在显著差异。c语言专注于过程式编程和系统级开发,以简洁、高效著称。c++作为c语言的超集,引入了面向对象编程,增强了代码组织和管理能力,但学习曲线也更陡峭。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

327

5

c语言和c++先学哪个好
c语言和c++先学哪个好

初学者选择学习c语言还是c++语言,需要根据个人学习目标、背景以及编程兴趣和预期应用方向来决定。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

426

5

c语言和c++的区别和联系
c语言和c++的区别和联系

c语言和c++是计算机科学领域应用广泛的编程语言。虽然它们有着相似的基础,但它们在语言类型、语法功能和内存管理方面存在着显著差异。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

600

5

c++软件中文更改教程
c++软件中文更改教程

对于 ide,可通过打开设置,找到语言设置,选择中文,并保存更改。对于非 ide 应用程序,可查找设置或选项,选择语言设置,更改为中文,并保存更改。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.21

1429

9

python和java和c++学习性价比分析
python和java和c++学习性价比分析

Python以其易学性、丰富的库和活跃的社区而著称,适合数据科学、人工智能和Web开发。Java以其跨平台性、企业级应用开发和Android应用开发而闻名。C++以其底层控制能力、高效性能和游戏开发而著称。选择哪种语言取决于个人兴趣、职业方向和特定需求。想了解更多python和java和c++的相关内容,可以阅读本专题下面的文章。

2024.03.22

1237

7

c++和c语言学习顺序推荐
c++和c语言学习顺序推荐

对于初学者,建议先学习C语言,掌握编程基础后再转入C++,便于理解面向对象编程概念。有编程经验者可直接学习C++,快速接触高级编程技术。想了解更多c++和c语言的相关内容,可以阅读本专题下面的文章。

2024.03.25

1325

9

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ 手册教程
C++ 手册教程

共41课时 | 78.5万人学习

尚学堂ios初级视频教程
尚学堂ios初级视频教程

共77课时 | 21.3万人学习

C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习