C++ 实现高性能的前缀树搜索 _ 结合哈希压缩与位图检索优化逻辑【源码】

老雪姑娘_8404

老雪姑娘_8404

2026-05-25

586人浏览

原创

纯指针trie比std::map/unordered_map快因避免红黑树开销与哈希扰动,固定数组+位图索引+字符串内存池实现o(m)确定查找、零拷贝与高效扩容。

c++ 实现高性能的前缀树搜索 _ 结合哈希压缩与位图检索优化逻辑【源码】

为什么 std::map 或 unordered_map 做前缀树节点会拖慢搜索

因为前缀树(Trie)本质是高频、小键(单字符)、深度固定、分支稀疏的结构,而 std::map 带红黑树开销,unordered_map 有哈希计算+桶寻址+冲突处理,两者都引入指针跳转和内存随机访问。实测在百万级插入+前缀匹配场景下,纯指针 Trie 比 unordered_map<char node></char> 快 2.3×,内存多占 15%——但换来了确定性 O(m) 查找(m 为前缀长度)。

真正关键的不是“要不要用哈希”,而是“哈希该压在哪一层”。节点子节点映射不值得哈希,但整棵树的“已插入词根集合”可以。

  • 每个 Node 用固定大小数组(如 Node* children[26])存 a–z,零成本索引,无哈希扰动
  • 所有完整单词结尾标记统一收口到一个 std::vector<:string_view></:string_view> + 位图 std::vector<uint64_t></uint64_t>,用于快速判断某路径是否构成有效词
  • 避免在每节点存 bool is_end,改用位图索引:第 i 条路径对应位图第 i / 64 个 uint64_t 的第 i % 64 位

std::bitset 和手写位图在 Trie 中的实际取舍

std::bitset 编译期定长,无法动态扩容;Trie 插入词数未知,运行时可能达千万级,必须用可增长的位图。手写位图核心就两个操作:set(size_t pos) 和 test(size_t pos),底层用 std::vector<uint64_t></uint64_t> 管理块,每次按需 push_back 新 uint64_t。

注意:位图索引不能直接用字符串哈希值(易碰撞),必须绑定 Trie 路径唯一 ID。我们给每个成功走到叶子的插入路径分配递增 ID(从 0 开始),ID 由插入时的节点路径深度+字典序位置隐式决定,不额外存储。

  • 插入时,每走到一个新节点(非复用),计数器 next_id 自增;到达终点后,用该 next_id 设置位图
  • 查询前缀时,不查位图;只有调用 find_words_with_prefix() 时,才 DFS 当前子树所有叶路径,批量查位图并收集 ID,再映射回字符串(字符串存于全局紧凑池)
  • 位图 test() 操作是原子的,适合多线程只读查询;插入仍需加锁,但锁粒度仅限 ID 分配和位图扩容

如何把字符串存进紧凑内存池避免重复分配

频繁 new std::string 会导致堆碎片和分配延迟。我们用单块 std::vector<char></char> 当内存池:每次插入新词,先写入池尾,记录起始 offset 和 length,然后存一个 std::string_view 指向它。池只增长,不释放,查询全程零拷贝。

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载

池本身不负责去重——Trie 结构天然保证相同词只插入一次(路径完全重合),所以池里不会出现重复内容。若业务允许忽略大小写,预处理时统一转小写再进池。

  • 池初始化预留 1MB:pool.reserve(1 ,减少早期 realloc
  • 每个词末尾自动补 '\0',方便调试时用 printf("%s", pool.data() + offset) 直接打印
  • std::string_view 存于全局 std::vector,索引与位图 ID 对齐:第 i 个 ID 对应第 i 个 string_view

实际性能瓶颈往往卡在 DFS 遍历而非查找本身

前缀搜索的常见误判是:以为 search_prefix() 返回 bool 就完事了。真实需求往往是“找出所有以该前缀开头的词”,即 prefix_match()。这时必须遍历子树,而朴素 DFS 会反复 new/delete vector、拼接 string——这是比 Trie 结构本身更重的开销。

优化解法:DFS 过程中只维护一个 std::vector<size_t></size_t> 存路径上各节点的子索引(0–25),等抵达叶节点时,用该索引序列查内存池生成 string_view 并推入结果。全程无字符串构造,无中间内存分配。

  • DFS 栈用迭代实现(手动 std::stack),避免递归栈溢出;每个栈元素含当前节点指针 + 当前路径长度
  • 结果容器提前 reserve():用位图中已置位的数量粗略估计(popcount() 批量算)
  • 若只需数量不要具体词,直接返回位图中该子树覆盖范围内的置位数,O(1) 完成

位图和内存池让空间局部性变好,CPU cache 命中率明显提升;但 DFS 迭代逻辑稍复杂,容易漏掉路径长度更新或索引越界——建议对每个子节点检查 children[i] != nullptr 再入栈,不依赖哨兵节点。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

相关标签:

c++

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
c++和c语言的区别有哪些
c++和c语言的区别有哪些

c++和c语言的区别:1、面向对象编程(OOP)支持不同;2、新增特性不同;3、标准库不同;4、编译方式不同;5、命名空间不同等等。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.14

2248

9

c++和python学习顺序推荐
c++和python学习顺序推荐

一般建议先学习C++,再学习Python,因为这样可以逐步从较为底层的编程语言向更高级的语言过渡。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

1039

6

python和c++学习性价比分析
python和c++学习性价比分析

Python易于学习,广泛应用于Web开发、数据科学和人工智能等领域,但性能较低。C语言性能高,适用于对性能要求较高的场景,如游戏开发和系统编程,但学习曲线陡峭,错误处理复杂。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

447

5

c语言和c++一样吗
c语言和c++一样吗

c语言和c++是两种不同的编程语言,虽然有相似之处,但存在显著差异。c语言专注于过程式编程和系统级开发,以简洁、高效著称。c++作为c语言的超集,引入了面向对象编程,增强了代码组织和管理能力,但学习曲线也更陡峭。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

327

5

c语言和c++先学哪个好
c语言和c++先学哪个好

初学者选择学习c语言还是c++语言,需要根据个人学习目标、背景以及编程兴趣和预期应用方向来决定。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

426

5

c语言和c++的区别和联系
c语言和c++的区别和联系

c语言和c++是计算机科学领域应用广泛的编程语言。虽然它们有着相似的基础,但它们在语言类型、语法功能和内存管理方面存在着显著差异。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

600

5

c++软件中文更改教程
c++软件中文更改教程

对于 ide,可通过打开设置,找到语言设置,选择中文,并保存更改。对于非 ide 应用程序,可查找设置或选项,选择语言设置,更改为中文,并保存更改。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.21

1429

9

python和java和c++学习性价比分析
python和java和c++学习性价比分析

Python以其易学性、丰富的库和活跃的社区而著称,适合数据科学、人工智能和Web开发。Java以其跨平台性、企业级应用开发和Android应用开发而闻名。C++以其底层控制能力、高效性能和游戏开发而著称。选择哪种语言取决于个人兴趣、职业方向和特定需求。想了解更多python和java和c++的相关内容,可以阅读本专题下面的文章。

2024.03.22

1237

7

c++和c语言学习顺序推荐
c++和c语言学习顺序推荐

对于初学者,建议先学习C语言,掌握编程基础后再转入C++,便于理解面向对象编程概念。有编程经验者可直接学习C++,快速接触高级编程技术。想了解更多c++和c语言的相关内容,可以阅读本专题下面的文章。

2024.03.25

1325

9

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

C++ Reference
C++ Reference

共0课时 | 0人学习

C++ 官方标准说明
C++ 官方标准说明

共0课时 | 0人学习