C++使用malloc分配超大内存导致虚拟内存占满怎么排查内存泄露点

千静酱_5894

千静酱_5894

2026-10-03

797人浏览

原创

说明分配的是虚拟内存而非物理内存,因malloc对大块内存调用mmap(map_anonymous),未写入时不映射物理页,故vss飙升而rss不变。

c++使用malloc分配超大内存导致虚拟内存占满怎么排查内存泄露点

malloc分配超大内存后虚拟内存(VSS)飙升,但RSS没涨,说明什么

这通常不是内存泄漏,而是虚拟地址空间被大量占用——malloc在Linux下对大块内存(默认≥128KB)会直接调用mmap(MAP_ANONYMOUS),分配的是虚拟内存页,不立即映射物理页。只要没写入,cat /proc/[pid]/status | grep VmSize显示的VmSize(即VSS)会暴涨,但VmRSS几乎不变。

排查重点应转向:是否反复malloc却未free?是否误用malloc分配了本该用栈或对象生命周期管理的巨型缓冲区?是否调用了第三方库内部反复mmap却未munmap?

用pstack + /proc/[pid]/maps快速定位可疑调用点

当进程卡住或VSS持续上涨时,别急着上Valgrind——它对大内存分配开销高且可能失败。先用轻量方式抓现场:

  • 执行ps aux --sort=-vsz | head -n 5确认哪个进程VSS异常高
  • 用pstack [pid]看当前线程调用栈,重点关注频繁出现在malloc/new之后的函数名(比如load_large_file、decode_frame)
  • 检查/proc/[pid]/maps中是否有大量相邻的、大小相近的anon内存段(如每段2MB、间隔0x200000),这是反复mmap的典型痕迹
  • 若发现某段地址范围在多次采样中持续存在且增长,用gdb -p [pid]附加后执行info proc mappings比对

为什么Valgrind --tool=memcheck对这类问题容易漏报

Valgrind拦截的是malloc/free等libc符号,但很多场景绕过了它:

  • 直接调用syscalls(SYS_mmap, ...)或posix_memalign,Valgrind默认不跟踪
  • 某些图像/音视频库(如FFmpeg、OpenCV)内部用mmap做零拷贝帧缓冲,不走malloc路径
  • malloc返回指针后,程序只存了部分偏移(如ptr + 4096),Valgrind无法识别该指针已“丢失”
  • 多线程环境下,一个线程malloc,另一个线程通过原子变量传递裸指针,但忘记free——Valgrind能检测到泄露,但无法定位是哪条线程哪次分配

此时更有效的是结合LD_PRELOAD自定义malloc钩子,记录每次调用的backtrace()和大小,再按大小倒序聚合分析。

用LD_PRELOAD打桩malloc并记录调用栈的最小可行方案

无需重编译,运行时注入即可:

C++ Code Review Master
C++ Code Review Master

组合式C++代码评审方案,融合静态分析、AI推理、多轮迭代评审和C++专项检查,适用于PR审查、增量代码审查、全项目评审和代码质量评分,触发词包括review cpp、cpp代码评审、C++review、代码审查。

下载
#define _GNU_SOURCE
#include <dlfcn.h>
#include <execinfo.h>
#include <stdio.h>
#include <stdlib.h>
#include <unistd.h><p>static void<em> (</em>real_malloc)(size_t) = NULL;</p>
<p>void<em> malloc(size_t size) {
if (!real_malloc) real_malloc = dlsym(RTLD_NEXT, "malloc");
if (size > 1024</em>1024) { // 只记录≥1MB的分配
void<em> ptr = real_malloc(size);
if (ptr) {
void</em> bt[32];
int nptrs = backtrace(bt, 32);
char*<em> strings = backtrace_symbols(bt, nptrs);
if (strings) {
FILE</em> f = fopen("/tmp/malloc_log.txt", "a");
if (f) {
fprintf(f, "ALLOC %zu bytes at %p: ", size, ptr);
for (int i = 2; i </p></unistd.h></stdlib.h></stdio.h></execinfo.h></dlfcn.h>

编译:gcc -shared -fPIC -o malloc_hook.so malloc_hook.c -ldl

运行:LD_PRELOAD=./malloc_hook.so ./your_program

注意:日志文件需提前创建并确保可写;backtrace在多线程下可能不准,优先在单线程复现路径下使用。

真正难缠的往往是跨模块、跨语言(比如Python调C++扩展)的内存归属模糊——这时候得靠/proc/[pid]/maps里地址段的归属模块反查,而不是依赖某一次malloc调用本身。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
c++和c语言的区别有哪些
c++和c语言的区别有哪些

c++和c语言的区别:1、面向对象编程(OOP)支持不同;2、新增特性不同;3、标准库不同;4、编译方式不同;5、命名空间不同等等。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.14

2208

9

c++和python学习顺序推荐
c++和python学习顺序推荐

一般建议先学习C++,再学习Python,因为这样可以逐步从较为底层的编程语言向更高级的语言过渡。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

979

6

python和c++学习性价比分析
python和c++学习性价比分析

Python易于学习,广泛应用于Web开发、数据科学和人工智能等领域,但性能较低。C语言性能高,适用于对性能要求较高的场景,如游戏开发和系统编程,但学习曲线陡峭,错误处理复杂。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

407

5

c语言和c++一样吗
c语言和c++一样吗

c语言和c++是两种不同的编程语言,虽然有相似之处,但存在显著差异。c语言专注于过程式编程和系统级开发,以简洁、高效著称。c++作为c语言的超集,引入了面向对象编程,增强了代码组织和管理能力,但学习曲线也更陡峭。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

307

5

c语言和c++先学哪个好
c语言和c++先学哪个好

初学者选择学习c语言还是c++语言,需要根据个人学习目标、背景以及编程兴趣和预期应用方向来决定。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

386

5

c语言和c++的区别和联系
c语言和c++的区别和联系

c语言和c++是计算机科学领域应用广泛的编程语言。虽然它们有着相似的基础,但它们在语言类型、语法功能和内存管理方面存在着显著差异。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

580

5

c++软件中文更改教程
c++软件中文更改教程

对于 ide,可通过打开设置,找到语言设置,选择中文,并保存更改。对于非 ide 应用程序,可查找设置或选项,选择语言设置,更改为中文,并保存更改。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.21

1389

9

python和java和c++学习性价比分析
python和java和c++学习性价比分析

Python以其易学性、丰富的库和活跃的社区而著称,适合数据科学、人工智能和Web开发。Java以其跨平台性、企业级应用开发和Android应用开发而闻名。C++以其底层控制能力、高效性能和游戏开发而著称。选择哪种语言取决于个人兴趣、职业方向和特定需求。想了解更多python和java和c++的相关内容,可以阅读本专题下面的文章。

2024.03.22

1197

7

c++和c语言学习顺序推荐
c++和c语言学习顺序推荐

对于初学者,建议先学习C语言,掌握编程基础后再转入C++,便于理解面向对象编程概念。有编程经验者可直接学习C++,快速接触高级编程技术。想了解更多c++和c语言的相关内容,可以阅读本专题下面的文章。

2024.03.25

1305

9

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Conan 2 Essentials 免费课程
Conan 2 Essentials 免费课程

共0课时 | 0人学习

CMake 与 Conan 集成实践
CMake 与 Conan 集成实践

共0课时 | 0人学习

Conan 2 高级依赖模型介绍
Conan 2 高级依赖模型介绍

共0课时 | 0人学习