C++实现带优先级的消息分发系统 _ 堆排序与互斥锁应用【源码】

陌涛姑娘_6260

陌涛姑娘_6260

2026-05-02

501人浏览

原创

std::priority_queue不能直接用于多消费者广播队列,因其非线程安全且默认最大堆与业务最小优先级需求相反;需自定义比较器、细粒度锁、分离分发逻辑,并避免使用windows专属api。

c++实现带优先级的消息分发系统 _ 堆排序与互斥锁应用【源码】

直接用 std::priority_queue 做全局广播队列,必然卡死或丢消息——它不是为多消费者并发分发设计的。

std::priority_queue 默认是最大堆,但业务常要最小优先级

很多人一上来就写 std::priority_queue<message></message>,结果发现高优先级消息(比如 priority=1)被排在后面。因为默认用 std::less<message></message>,top() 返回的是“最大”值,而你定义的 priority 越小越紧急,这刚好反了。

必须显式指定比较器:

struct Message {
    int priority;
    std::string data;
    bool operator rhs.priority; } // 注意是 >
};
std::priority_queue<message> max_heap; // 这样 top() 才返回 priority 最小的
// 或更清晰地:
std::priority_queue<message std::vector>, std::greater<int>> min_heap;
// 但注意:std::greater<int> 只能比较 int 成员,不能直接用于 Message,得自定义比较器或重载 operator
<ul>
<li>漏掉容器模板参数 <code>std::vector<message></message></code> 会触发编译错误:<code>no type named 'value_type' in 'std::less<message>'</message></code>
</li>
<li>重载 <code>operator 时,逻辑必须严格满足“严格弱序”,否则 <code>push()</code> 行为未定义;常见错是写成 <code>return priority </code></code>
</li>
<li>别在比较器里做耗时操作(如日志、网络调用),它会在每次堆调整时被高频调用</li>
</ul>
<h3>单队列 + 全局锁 = 订阅者互相阻塞</h3>
<p>一个 <code>std::priority_queue</code> 加一把 <code>std::mutex</code>,然后所有生产者 push、所有消费者 while(!empty()) pop,这是最典型也最危险的模式。</p>
<p>问题在于:<code>pop()</code> 是两步操作(取 top + 删除),而标准库没提供原子的“弹出并返回”接口;你必须先 <code>top()</code> 再 <code>pop()</code>,中间若解锁,其他线程可能插入/删除,导致数据不一致。</p><div class="aritcle_card flexRow artxards">
											<div class="artcardd flexRow">
												<a class="aritcle_card_img" rel="nofollow" href="/xiazai/gongju/2823" title="C++14"><img
														src="https://img.php.cn/upload/manual/001/431/639/6ac8b33c327c4749.png" alt="C++14" onerror="this.onerror='';this.src='/static/lhimages/moren/morentu.png'" ></a>
												<div class="aritcle_card_info flexColumn">
													<a rel="nofollow" href="/xiazai/gongju/2823" title="C++14" class="overflowclass">C++14</a>
													<p class="overflowclass">C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。</p>
												</div>
												<a rel="nofollow" href="/xiazai/gongju/2823" title="C++14" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span>
												</a>
											</div>
										</div>
<ul>
<li>正确做法是:只在锁内做 <code>top()</code> 和 <code>pop()</code>,但必须确保每次只服务一个订阅者——即锁粒度要细到“每个主题+每个消费者线程”</li>
<li>更稳妥的是用 <code>std::queue</code> + 手动堆排序(<code>std::make_heap</code> 等),把堆操作和锁分离:锁内仅交换元素、调整索引;实际分发在锁外进行</li>
<li>若用条件变量等待新消息,<code>notify_one()</code> 比 <code>notify_all()</code> 更轻量,除非你明确需要唤醒全部消费者</li>
</ul>
<h3>广播分发必须脱离队列层,且防重复消费</h3>
<p>队列只负责“按优先级排序并暂存”,分发逻辑必须后置。例如某主题 <code>"alarm"</code> 有 3 个订阅者,新来一条 <code>priority=0</code> 消息,不能让队列自己遍历投递——那等于把网络延迟、序列化开销全塞进临界区。</p>
<p>应这样组织:</p>
<ul>
<li>锁内:从该主题的优先队列取出消息,拷贝一份,记录 msg_id,更新已分发订阅者集合(如 <code>std::unordered_set<subscriber_id></subscriber_id></code>)</li>
<li>解锁后:遍历该主题当前活跃订阅者列表,对每个订阅者异步投递(如 <code>std::async</code> 或线程池 <code>post()</code>)</li>
<li>每个订阅者收到后必须校验 <code>msg_id</code> 是否已处理过,否则高优消息重发会导致状态错乱</li>
<li>饥饿问题靠“低优先级消息保底调度”缓解:比如每 10 条高优消息后,强制 pop 一条最低优先级消息</li>
</ul>
<h3>别碰 BroadcastSystemMessage,它和你的服务无关</h3>
<p>搜到 <code>BroadcastSystemMessage</code> 就停手。它是 Windows GUI 子系统内部 API,只能向本机窗口过程发 <code>WM_*</code> 消息,不支持序列化、无优先级机制、不能跨进程、更不适用于 C++ 后端服务的多线程消息路由。</p>
<p>替代方案很明确:</p>
<ul>
<li>进程内:用 <code>std::condition_variable</code> + 主题哈希表 + 每主题独立优先队列</li>
<li>跨进程:命名管道(Windows)或 domain socket(Linux),配合消息头带 priority 字段</li>
<li>分布式:别自己造,直接上 Redis Streams 或 Kafka,它们原生支持优先级分组与消费者组语义</li>
</ul>
<p>真正难的从来不是堆怎么调、锁怎么加,而是“谁该在什么时候看到哪条消息”——这个策略一旦写死在队列实现里,后面加个灰度开关或按地域分流,就得重写整个分发引擎。</p></int></int></message></message>

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

c++

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
c++和c语言的区别有哪些
c++和c语言的区别有哪些

c++和c语言的区别:1、面向对象编程(OOP)支持不同;2、新增特性不同;3、标准库不同;4、编译方式不同;5、命名空间不同等等。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.14

2248

9

c++和python学习顺序推荐
c++和python学习顺序推荐

一般建议先学习C++,再学习Python,因为这样可以逐步从较为底层的编程语言向更高级的语言过渡。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

1019

6

python和c++学习性价比分析
python和c++学习性价比分析

Python易于学习,广泛应用于Web开发、数据科学和人工智能等领域,但性能较低。C语言性能高,适用于对性能要求较高的场景,如游戏开发和系统编程,但学习曲线陡峭,错误处理复杂。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

427

5

c语言和c++一样吗
c语言和c++一样吗

c语言和c++是两种不同的编程语言,虽然有相似之处,但存在显著差异。c语言专注于过程式编程和系统级开发,以简洁、高效著称。c++作为c语言的超集,引入了面向对象编程,增强了代码组织和管理能力,但学习曲线也更陡峭。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

327

5

c语言和c++先学哪个好
c语言和c++先学哪个好

初学者选择学习c语言还是c++语言,需要根据个人学习目标、背景以及编程兴趣和预期应用方向来决定。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

406

5

c语言和c++的区别和联系
c语言和c++的区别和联系

c语言和c++是计算机科学领域应用广泛的编程语言。虽然它们有着相似的基础,但它们在语言类型、语法功能和内存管理方面存在着显著差异。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

580

5

c++软件中文更改教程
c++软件中文更改教程

对于 ide,可通过打开设置,找到语言设置,选择中文,并保存更改。对于非 ide 应用程序,可查找设置或选项,选择语言设置,更改为中文,并保存更改。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.21

1409

9

python和java和c++学习性价比分析
python和java和c++学习性价比分析

Python以其易学性、丰富的库和活跃的社区而著称,适合数据科学、人工智能和Web开发。Java以其跨平台性、企业级应用开发和Android应用开发而闻名。C++以其底层控制能力、高效性能和游戏开发而著称。选择哪种语言取决于个人兴趣、职业方向和特定需求。想了解更多python和java和c++的相关内容,可以阅读本专题下面的文章。

2024.03.22

1217

7

c++和c语言学习顺序推荐
c++和c语言学习顺序推荐

对于初学者,建议先学习C语言,掌握编程基础后再转入C++,便于理解面向对象编程概念。有编程经验者可直接学习C++,快速接触高级编程技术。想了解更多c++和c语言的相关内容,可以阅读本专题下面的文章。

2024.03.25

1325

9

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

C++ Reference
C++ Reference

共0课时 | 0人学习

C++ 官方标准说明
C++ 官方标准说明

共0课时 | 0人学习