怎么从底层机制拆解强开透明大页在堆内存大范围扫描时引发的系统卡顿

酷芳小哥_1750

酷芳小哥_1750

2026-05-24

282人浏览

原创

数据库等延迟敏感场景应禁用透明大页(thp),因其后台khugepaged进程强制合并物理页,与高频内存分配/扫描冲突,引发锁竞争、tlb刷新及周期性卡顿;须设为never并验证anonhugepages为0及smaps无2048kb页。

怎么从底层机制拆解强开透明大页在堆内存大范围扫描时引发的系统卡顿

强开透明大页(THP)在堆内存大范围扫描时引发卡顿,根本原因不在“用了大页”,而在于其后台自动合并机制与扫描行为触发的内存压力模式发生了恶性耦合。这不是配置错误,而是机制冲突。

1. 卡顿源头:khugepaged 正在后台强行压缩内存

当 THP 设置为 always,内核不会直接分配 2MB 大页给 malloc/new,而是先按 4KB 小页分配。随后,后台守护进程 khugepaged 持续扫描物理内存,寻找连续、空闲、同属一个 NUMA 节点的 512 个 4KB 页——一旦凑齐,就发起一次内存压缩(compaction)操作,把它们“捏”成一个 2MB 大页。

这个过程需要:

  • 锁定相关内存区域(阻塞其他内存分配)
  • 迁移正在使用的页(触发 page migration)
  • 更新多级页表(涉及 TLB flush)
  • 可能唤醒 kswapd 回收内存以腾出连续空间

整套动作是同步、高优先级、且不可中断的——它会抢占 CPU 时间片,造成数十毫秒到几百毫秒的延迟毛刺。

2. 堆扫描如何精准触发这个雷区

Java CMS/G1 GC、Go 的 mark-sweep、或 C++ 自定义内存池的 full sweep,本质都是对整个堆做线性遍历+读取标记位。这种行为具有两个致命特征:

  • 高内存带宽占用:持续读取大量不相邻的虚拟地址,导致 TLB 快速失效,频繁触发 page walk;
  • 隐式内存压力信号:扫描本身虽不分配新页,但会访问大量冷页,激活 inactive LRU 链表,让内核误判“内存即将不足”,从而加速 khugepaged 扫描和 compaction 尝试。

结果就是:GC 线程越努力扫描,khugepaged 越疯狂压缩,CPU 在 GC 和 compaction 之间反复横跳,系统响应停滞。

3. 为什么“看起来内存充足”却仍卡死

关键在于连续物理内存不足,而非总内存不足。

  • 堆内存长期使用后必然碎片化,物理页分散在不同内存块;
  • khugepaged 要求 512 个 4KB 页必须物理连续,哪怕系统还有 20GB 空闲内存,只要没有一块 2MB 的连续空闲物理区,它就会不断尝试 compaction;
  • 每次失败的 compaction 都会留下锁竞争、TLB 刷新、链表遍历等开销,累积成可观测的卡顿。

4. 验证与定位方法

不需要猜,用三行命令即可确认:

# 查看是否启用 THP 及当前状态
cat /sys/kernel/mm/transparent_hugepage/enabled
<h1>查看 khugepaged 是否活跃、有无失败记录</h1><p>grep -i "huge|compact" /proc/vmstat</p><h1>实时观察 compaction 延迟(单位:微秒)</h1><p>cat /proc/sys/vm/compact_*</p>

若 pgmajfault 或 compact_stall 数值在堆扫描期间突增,基本可断定是 THP 后台机制在捣鬼。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

5467

5

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.10

2388

6

PixTV官网入口地址合集
PixTV官网入口地址合集

本专题汇总了 PixTV AI 一站式视频创作平台的官方入口与使用教程。无需下载软件,浏览器直接访问即可使用。平台将剧本、图像、视频、声音与剪辑整合在“无限画布”中,接入 GPT Image 2.5、Seedance 2.5 等头部模型。本专题整理了从新建画布、角色锚定、分镜拆分到视频生成与导出的完整操作指南,助你快速上手 AI 短剧与漫剧创作。

2026.10.10

80

15

Kratos框架HTTP与gRPC服务开发教程
Kratos框架HTTP与gRPC服务开发教程

本专题围绕Kratos框架双协议服务开发,涵盖HTTP路由与处理器编写、参数获取、gRPC服务实现与客户端调用、metadata上下文传递、encoding编解码注册、统一响应封装、超时控制与流式响应实现方法。

2026.10.10

40

15

Kratos框架Protobuf接口定义与代码生成合集
Kratos框架Protobuf接口定义与代码生成合集

本专题讲解Kratos框架接口定义体系,涵盖proto编写规范、proto add/client/server生成命令、http注解路由、validate校验、OpenAPI文档生成、跨服务proto复用与兼容性设计。

2026.10.10

20

15

C++虚函数怎么定义和调用
C++虚函数怎么定义和调用

C++虚函数是实现运行时多态的重要机制。本专题从virtual关键字的基本用法入手,介绍基类与派生类之间的函数重写、基类指针调用派生类方法,以及动态绑定的执行过程,帮助初学者掌握虚函数的核心语法。

2026.10.10

20

26

C++类与对象的封装方法教程
C++类与对象的封装方法教程

C++封装是面向对象编程的核心特性之一,通过类将数据与操作数据的函数组织在一起,并利用访问权限控制外部访问。本专题介绍类的定义、成员变量、成员函数以及public、private和protected的使用方法,帮助初学者掌握封装的基本原理。

2026.10.10

20

32

C++构造函数定义与调用方法
C++构造函数定义与调用方法

C++构造函数用于初始化类对象,是面向对象编程的重要基础。本专题从构造函数的定义、声明和调用入手,介绍默认构造函数、带参数构造函数、拷贝构造函数及成员初始化列表,帮助初学者掌握对象创建与初始化的基本方法。

2026.10.10

20

16

Kratos框架零基础入门教程
Kratos框架零基础入门教程

本专题整理Kratos框架入门内容,涵盖Go环境准备、kratos CLI安装升级、new命令创建项目、目录结构分层说明、服务启动与双协议端口、依赖下载报错排查,帮助开发者快速跑通第一个Kratos框架微服务应用。

2026.10.10

20

15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习