怎么在Linux下监测C++多线程的互斥锁耗时

幻夢星雲

幻夢星雲

2026-08-03

963人浏览

原创

c++oding="utf-8" ?>

pthread_mutex_lock慢却难以定位,因其不记录耗时且争用时的内核等待、调度延迟等关键路径被隐藏;需用ld_preload拦截统计或perf抓取futex/sched事件才能揭示真相。

怎么在linux下监测c++多线程的互斥锁耗时

为什么 pthread_mutex_lock 会慢,但你查不到它慢在哪

因为标准 POSIX 互斥锁本身不记录耗时;pthread_mutex_lock 成功返回时,你根本不知道它等了 10 微秒还是 10 毫秒。更麻烦的是,一旦发生争用,线程可能在内核态睡眠、被调度器挂起、甚至经历上下文切换——这些时间全被掩藏在系统调用背后。

所以不能靠打日志或简单计时:临界区外加 clock_gettime(CLOCK_MONOTONIC) 再减,会漏掉内核等待队列排队、调度延迟等关键路径。

  • 真正耗时大户往往不是锁本身,而是持有锁的线程卡在 I/O、计算或另一个锁上
  • pthread_mutex_trylock 返回失败 ≠ 锁被占用很久,也可能是刚释放、还没被调度器唤醒
  • glibc 的 pthread_mutex_timedlock 只能帮你设上限,不能告诉你“上次等了多久”

用 LD_PRELOAD 拦截并统计 pthread_mutex_lock 调用耗时

这是最轻量、无需改源码、能覆盖所有 pthread 使用场景的方法。原理是替换动态链接时的符号,把原函数包装一层再调用。

写一个 mutex_intercept.cpp

#include <dlfcn.h>
#include <time.h>
#include <stdio.h>
#include <stdlib.h><p>static int (<em>real_pthread_mutex_lock)(pthread_mutex_t</em>) = nullptr;</p>
<p><strong>attribute</strong>((constructor))
void init() {
real_pthread_mutex_lock = (int(<em>)(pthread_mutex_t</em>))dlsym(RTLD_NEXT, "pthread_mutex_lock");
}</p>
<p>int pthread_mutex_lock(pthread_mutex_t* mutex) {
struct timespec start, end;
clock_gettime(CLOCK_MONOTONIC, &start);
int ret = real_pthread_mutex_lock(mutex);
clock_gettime(CLOCK_MONOTONIC, &end);</p>
<pre class="brush:php;toolbar:false;">long us = (end.tv_sec - start.tv_sec) * 1000000L + (end.tv_nsec - start.tv_nsec) / 1000;
if (us > 1000) { // 只打印超过 1ms 的
    fprintf(stderr, "[MUTEX] wait %ld us on %p\n", us, (void*)mutex);
}
return ret;

}

编译成 so:

g++ -shared -fPIC -o libmutex_hook.so mutex_intercept.cpp -ldl

运行时注入:

PyCharm 2026.2.0.1 Linux版
PyCharm 2026.2.0.1 Linux版

PyCharm 2026.2.0.1 Linux版提供 JetBrains 官方 2026.2.0.1 版本安装包,适合需要指定 PyCharm 版本进行 Python 项目开发、运行和调试的用户。

下载
LD_PRELOAD=./libmutex_hook.so ./your_program
  • 注意:不要在生产环境长期开启,高频打日志会拖慢本身;建议只用于问题复现阶段
  • 该方法对 std::mutex 有效,因为 libc++/libstdc++ 底层仍调用 pthread_mutex_lock
  • 若程序用了自定义 mutex(比如 spinlock),这个 hook 不生效

用 perf 看锁等待的真实开销(含调度延迟)

perf 能抓到比用户态计时更底层的信息:比如线程在 futex_wait 上挂起多久、是否被抢占、有没有 CPU 迁移。这才是“为什么慢”的真相。

先跑程序,同时采集:

perf record -e 'syscalls:sys_enter_futex,sched:sched_switch' -g --call-graph dwarf ./your_program

然后分析:

perf script | grep -A 10 -B 5 'FUTEX_WAIT'

你会看到类似:

... futex_wait_queue_me ... [unknown] ... sched_switch ...

说明线程确实在 futex 上等,并且紧接着发生了调度切换——这就是锁争用导致的调度延迟证据。

  • sched:sched_switch 事件能暴露“等锁期间被切走”的行为,这是纯用户态计时永远看不到的
  • 如果发现大量 futex_wait 后紧跟 sched_switch,基本可断定锁持有者执行时间过长,或临界区里做了不该做的事(如 sleep、I/O、又拿另一把锁)
  • perf 不依赖代码修改,但需要 root 权限或 /proc/sys/kernel/perf_event_paranoid ≤ 2

std::mutex 构造时传入调试标识?不行,但可以换封装

C++ 标准库的 std::mutex 没有内置耗时统计开关。别试图给它加成员变量或继承重写——std::mutex 是 trivially copyable,且 ABI 兼容性敏感,动它等于埋雷。

可行做法是定义一个带统计的 wrapper:

struct TrackedMutex {
    std::mutex mtx;
    std::atomic_long total_wait_us{0};
    void lock() {
        auto start = std::chrono::steady_clock::now();
        mtx.lock();
        auto end = std::chrono::steady_clock::now();
        auto us = std::chrono::duration_cast<:chrono::microseconds>(end - start).count();
        if (us > 500) total_wait_us.fetch_add(us, std::memory_order_relaxed);
    }
    void unlock() { mtx.unlock(); }
};</:chrono::microseconds>

用的时候替换:

// 原来用 std::mutex mtx;
TrackedMutex mtx;
  • 这个 wrapper 对性能影响极小(只有原子加,且只在超时才触发)
  • 但它只统计用户态进入 lock 到返回的时间,不含内核 futex 等待中被调度器延迟的部分
  • 如果你的临界区本身就很重,那这个值已经足够预警;但若怀疑是调度瓶颈,还得靠 perf

真正难的不是测出“锁慢”,而是判断“慢得合不合理”。比如一个锁平均等 200μs,但如果它保护的是 10ms 的数据库查询,那 200μs 就是噪音;可如果它只保护几条赋值语句,那就是严重设计缺陷。耗时数字必须和临界区实际工作量对照着看,否则全是假信号。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
c++和c语言的区别有哪些
c++和c语言的区别有哪些

c++和c语言的区别:1、面向对象编程(OOP)支持不同;2、新增特性不同;3、标准库不同;4、编译方式不同;5、命名空间不同等等。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.14

832

9

c++和python学习顺序推荐
c++和python学习顺序推荐

一般建议先学习C++,再学习Python,因为这样可以逐步从较为底层的编程语言向更高级的语言过渡。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

753

6

python和c++学习性价比分析
python和c++学习性价比分析

Python易于学习,广泛应用于Web开发、数据科学和人工智能等领域,但性能较低。C语言性能高,适用于对性能要求较高的场景,如游戏开发和系统编程,但学习曲线陡峭,错误处理复杂。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

243

5

c语言和c++一样吗
c语言和c++一样吗

c语言和c++是两种不同的编程语言,虽然有相似之处,但存在显著差异。c语言专注于过程式编程和系统级开发,以简洁、高效著称。c++作为c语言的超集,引入了面向对象编程,增强了代码组织和管理能力,但学习曲线也更陡峭。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

242

5

c语言和c++先学哪个好
c语言和c++先学哪个好

初学者选择学习c语言还是c++语言,需要根据个人学习目标、背景以及编程兴趣和预期应用方向来决定。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

224

5

c语言和c++的区别和联系
c语言和c++的区别和联系

c语言和c++是计算机科学领域应用广泛的编程语言。虽然它们有着相似的基础,但它们在语言类型、语法功能和内存管理方面存在着显著差异。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

439

5

c++软件中文更改教程
c++软件中文更改教程

对于 ide,可通过打开设置,找到语言设置,选择中文,并保存更改。对于非 ide 应用程序,可查找设置或选项,选择语言设置,更改为中文,并保存更改。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.21

1105

9

python和java和c++学习性价比分析
python和java和c++学习性价比分析

Python以其易学性、丰富的库和活跃的社区而著称,适合数据科学、人工智能和Web开发。Java以其跨平台性、企业级应用开发和Android应用开发而闻名。C++以其底层控制能力、高效性能和游戏开发而著称。选择哪种语言取决于个人兴趣、职业方向和特定需求。想了解更多python和java和c++的相关内容,可以阅读本专题下面的文章。

2024.03.22

856

7

c++和c语言学习顺序推荐
c++和c语言学习顺序推荐

对于初学者,建议先学习C语言,掌握编程基础后再转入C++,便于理解面向对象编程概念。有编程经验者可直接学习C++,快速接触高级编程技术。想了解更多c++和c语言的相关内容,可以阅读本专题下面的文章。

2024.03.25

999

9

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpMyAdmin 安装文档
phpMyAdmin 安装文档

共0课时 | 0人学习

Apifox下载与安装手册
Apifox下载与安装手册

共0课时 | 0人学习

安装 Xdebug 并配置 phpstorm
安装 Xdebug 并配置 phpstorm

共1课时 | 126人学习