C++ 实现高性能无锁哈希表架构 _ 基于原子变量与 CAS 循环重试优化【源码】

冬杰同学_5656

冬杰同学_5656

2026-05-13

931人浏览

原创

std::unordered_map不能直接用于多线程高频写入,因其无内置同步机制,桶数组与节点链接修改非原子;粗粒度互斥锁导致严重争用;无锁实现需cas更新头指针、惰性删除、原子表切换及纯函数哈希等严格约束。

c++ 实现高性能无锁哈希表架构 _ 基于原子变量与 cas 循环重试优化【源码】

为什么 std::unordered_map 不能直接用于多线程高频写入场景

因为它的内部结构(桶数组 + 链表/红黑树)在插入、扩容、删除时会修改共享指针和节点链接关系,std::unordered_map 本身不提供任何原子性保证。即使你用 std::mutex 包裹每次操作,也会因锁粒度太粗导致严重争用——尤其在写多读少或高并发插入时,吞吐量会断崖式下跌。

无锁设计的目标不是“完全不用锁”,而是把同步开销从临界区转移到单个原子指令上,靠 compare_exchange_weak 循环重试来推进状态变更。这意味着:所有共享数据必须是 POD 类型,节点内存布局要对齐,且不能有析构逻辑干扰原子更新。

  • 扩容不能原地 realloc 桶数组,必须用原子指针切换新旧表(类似 Linux RCU 的 grace period 思路)
  • 链表插入需用 CAS 更新头指针,失败就重试;删除则需标记节点为“逻辑删除”再惰性回收,避免 ABA 问题
  • std::atomic<node></node> 是基础,但注意 x86 上对 16 字节指针的 CAS 需要 cmpxchg16b 支持,编译时得加 -m128 或改用 8 字节指针(如用索引代替裸指针)

如何用 std::atomic_ref + CAS 实现线程安全的桶头指针更新

每个桶是一个链表头,类型为 std::atomic<node></node>。插入新节点时,不能直接赋值,必须用循环 CAS 替换头指针:

Node* expected = bucket_head.load(std::memory_order_acquire);
do {
    new_node->next = expected;
} while (!bucket_head.compare_exchange_weak(expected, new_node,
        std::memory_order_release, std::memory_order_acquire));

这里的关键是 compare_exchange_weak 的失败重试逻辑——它比 strong 版本更轻量,适合循环场景;memory_order_acquire/release 足以保证链表节点可见性,无需全序屏障。

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载
  • 如果桶头指针是 nullptr,expected 初始值就是 nullptr,CAS 成功即完成插入
  • 若多个线程同时插入,只有一个能成功更新头指针,其余线程拿到新 expected 后继续重试,不会丢数据
  • 切忌用 store() 直接覆盖——这会破坏链表结构,导致节点丢失

扩容时如何避免读写冲突与内存泄漏

扩容不是“复制完再切换”,而是分三步原子推进:resize_flag 标记开始、new_table 原子发布、旧表惰性迁移。核心是用一个 std::atomic<table> 存当前活跃表指针,并在每次读写前检查是否需要迁移。<p>写操作伪代码逻辑如下:</p> <pre class="brush:php;toolbar:false;"> Table* cur = table_ptr.load(std::memory_order_acquire); if (cur-&gt;is_resizing()) { migrate_one_node(key); // 将 key 对应桶的一个节点挪到新表 } // 然后正常执行插入(在 cur 表上) </pre> <ul> <li>迁移不是全量同步完成才切换,而是每次写操作顺带搬一个节点,摊平开销</li> <li>新表分配必须用 <code>aligned_alloc(64, size),确保 Node 内存按缓存行对齐,避免 false sharing

  • 旧表不能立即 delete,得等所有线程确认不再访问它——可用 epoch-based reclamation(EBR)或简单计数器延迟释放
  • 为什么哈希函数必须是纯函数且禁止抛异常

    无锁路径中任何非原子操作都不能被中断或回滚。如果 std::hash<t>::operator()</t> 内部调用了可能抛异常的函数(比如 std::string::hash 在某些实现里触发内存分配),整个 CAS 循环就会崩在中间——既没插入成功,也没释放资源,还卡住其他线程重试。

    • 自定义 key 类型务必提供 constexpr 哈希函数,例如用 FNV-1a 或 wyhash 的 header-only 实现
    • 避免在哈希计算中访问虚函数、动态分配、锁、IO 或系统调用
    • 对 std::string_view 这类类型,哈希函数必须只读取其 data() 和 size(),且保证生命周期长于哈希表操作

    真正难的不是写通 CAS 循环,而是让整个内存模型下每个节点的生命周期、可见性、重排序边界都可预测。稍有不慎,就会出现查不到刚插入的 key,或者删掉不该删的节点——这种 bug 往往只在特定核数、特定负载下偶发,复现成本极高。

    C++免费学习笔记(深入):立即使用
    在学习笔记中,你将探索 C++ 的入门与实战技巧!

    相关文章

    数码产品性能查询
    数码产品性能查询

    该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

    下载

    相关标签:

    c++

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

    相关专题

    更多
    C语言变量命名
    C语言变量命名

    c语言变量名规则是:1、变量名以英文字母开头;2、变量名中的字母是区分大小写的;3、变量名不能是关键字;4、变量名中不能包含空格、标点符号和类型说明符。php中文网还提供c语言变量的相关下载、相关课程等内容,供大家免费下载使用。

    2023.06.20

    3389

    3

    c语言入门自学零基础
    c语言入门自学零基础

    C语言是当代人学习及生活中的必备基础知识,应用十分广泛,本专题为大家c语言入门自学零基础的相关文章,以及相关课程,感兴趣的朋友千万不要错过了。

    2023.07.25

    2388

    9

    c语言运算符的优先级顺序
    c语言运算符的优先级顺序

    c语言运算符的优先级顺序是括号运算符 > 一元运算符 > 算术运算符 > 移位运算符 > 关系运算符 > 位运算符 > 逻辑运算符 > 赋值运算符 > 逗号运算符。本专题为大家提供c语言运算符相关的各种文章、以及下载和课程。

    2023.08.02

    1320

    5

    c语言数据结构
    c语言数据结构

    数据结构是指将数据按照一定的方式组织和存储的方法。它是计算机科学中的重要概念,用来描述和解决实际问题中的数据组织和处理问题。数据结构可以分为线性结构和非线性结构。线性结构包括数组、链表、堆栈和队列等,而非线性结构包括树和图等。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

    2023.08.09

    1258

    4

    c语言random函数用法
    c语言random函数用法

    c语言random函数用法:1、random.random,随机生成(0,1)之间的浮点数;2、random.randint,随机生成在范围之内的整数,两个参数分别表示上限和下限;3、random.randrange,在指定范围内,按指定基数递增的集合中获得一个随机数;4、random.choice,从序列中随机抽选一个数;5、random.shuffle,随机排序。

    2023.09.05

    1396

    5

    c语言const用法
    c语言const用法

    const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

    2023.09.20

    2258

    7

    c语言get函数的用法
    c语言get函数的用法

    get函数是一个用于从输入流中获取字符的函数。可以从键盘、文件或其他输入设备中读取字符,并将其存储在指定的变量中。本文介绍了get函数的用法以及一些相关的注意事项。希望这篇文章能够帮助你更好地理解和使用get函数 。

    2023.09.20

    3680

    8

    c数组初始化的方法
    c数组初始化的方法

    c语言数组初始化的方法有直接赋值法、不完全初始化法、省略数组长度法和二维数组初始化法。详细介绍:1、直接赋值法,这种方法可以直接将数组的值进行初始化;2、不完全初始化法,。这种方法可以在一定程度上节省内存空间;3、省略数组长度法,这种方法可以让编译器自动计算数组的长度;4、二维数组初始化法等等。

    2023.09.22

    17055

    6

    c语言中null和NULL的区别
    c语言中null和NULL的区别

    c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

    2023.09.22

    549

    3

    热门下载

    更多
    网站特效
    /
    网站源码
    /
    网站素材
    /
    前端模板

    精品课程

    更多
    相关推荐
    /
    热门推荐
    /
    最新课程
    C++ Core Guidelines
    C++ Core Guidelines

    共0课时 | 0人学习

    C++ Reference
    C++ Reference

    共0课时 | 0人学习

    C++ 官方标准说明
    C++ 官方标准说明

    共0课时 | 0人学习