如何处理MySQL 8.0中由于内存分配器导致的内存泄漏问题?

酷辰小哥_5657

酷辰小哥_5657

2026-08-09

262人浏览

原创

mysql 8.0 rss内存持续上涨并非真正内存泄漏,而是glibc malloc分配器碎片导致空闲页未归还os;换用tcmalloc/jemalloc并调优wait_timeout、sort_buffer_size等参数可有效缓解。

如何处理mysql 8.0中由于内存分配器导致的内存泄漏问题?

MySQL 8.0 本身没有传统意义上的 C 堆内存泄漏,但 mysqld 进程的 RSS 内存持续上涨、不随负载下降而回落,确实是常见且棘手的问题——根源往往不在 MySQL 代码,而在底层内存分配器(如 glibc malloc)的行为。

为什么 glibc malloc 会让 MySQL 看起来像在泄漏内存

MySQL 启动后会频繁申请/释放小块内存(比如 per-connection buffers、解析树节点、临时表行等),glibc 的默认 malloc 在高频率分配/释放后容易产生内存碎片,且不会主动将空闲页归还给 OS。这导致 ps aux 看到的 RSS 持续增长,但 performance_schema.memory_summary_global_by_event_name 显示的已用内存却稳定甚至下降。

  • 现象典型:Threads_connected 稳定,Threads_created 却每小时新增数百上千
  • 验证方法:运行 cat /proc/$(pgrep mysqld)/smaps | awk '/^MMU:/ {sum+=$2} END {print sum}'(实际物理映射页)对比 malloc_stats() 输出(需 gdb 或启用 tcmalloc)
  • 关键区别:RSS 上涨 ≠ MySQL 内部未 free;而是 malloc 保留了虚拟地址空间和部分物理页

换用 tcmalloc 或 jemalloc 是最直接有效的缓解手段

这两个分配器比 glibc malloc 更激进地回收空闲内存页,尤其适合 MySQL 这类高并发、高频分配/释放的场景。实测中,切换后 RSS 增长曲线常从“只升不降”变为“锯齿状波动”,夜间低峰期明显回落。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
  • 启用 tcmalloc:启动 mysqld 前设置 LD_PRELOAD="/usr/lib/x86_64-linux-gnu/libtcmalloc.so.4"(路径依系统而异)
  • 启用 jemalloc:同样用 LD_PRELOAD,推荐版本 >=5.2.1(避免早期版本的 thread cache bug)
  • 验证是否生效:连接 MySQL 后执行 SELECT @@version_compile_os; 并检查 error log 是否含 “using jemalloc” 或类似提示
  • 注意:不要同时加载多个 allocators;升级分配器库后务必重启 mysqld

配合分配器切换必须调优的连接与缓冲参数

即使换了分配器,若应用层仍滥用短连接或线程缓冲过大,仍会加剧内存压力。这些参数直接影响每次连接的内存开销:

  • wait_timeout 和 interactive_timeout 建议设为 60–180 秒(非 28800 默认值),避免空闲连接长期驻留
  • sort_buffer_size、read_buffer_size、join_buffer_size 不要全局设高(如 >2M),应依赖 session 级动态调整,或用 max_sort_length 控制排序阈值
  • 禁用已废弃的 query_cache_type(MySQL 8.0 默认关闭,但配置文件中残留会导致启动警告甚至干扰)
  • 确认客户端连接池行为:PHP 的 mysqlnd.max_persistent=0、Java 的 HikariCP maximumPoolSize 与 idleTimeout 必须匹配业务节奏

别忽略 InnoDB 缓冲池外的“隐形大户”

很多人盯着 innodb_buffer_pool_size,却漏掉几个常被低估的内存消耗点:

  • tmp_table_size 和 max_heap_table_size 共同限制内存临时表大小,设得过高(如 512M)会使单个复杂 JOIN 轻易吃掉百 MB;建议设为 64M–128M,并监控 Created_tmp_disk_tables 指标
  • Performance Schema 自身开销:若启用了大量 instruments(如 memory/%),其内存占用可能达百 MB;按需关闭:UPDATE performance_schema.setup_instruments SET ENABLED = 'NO' WHERE NAME LIKE 'memory/%';
  • 复制相关:如果启用了 Group Replication,group_replication_message_cache_size 默认 1G,且不随流量下降自动收缩,需根据集群规模调低

真正难处理的不是“找到哪个表占内存”,而是区分“RSS 上涨是 OS 层分配器滞留”还是“MySQL 内部某模块真没释放”。前者靠换 allocator + 参数收紧就能大幅改善;后者才需要深挖 memory_summary_by_thread_by_event_name 和堆栈分析。多数线上 case,属于前者。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

2173

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1339

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

775

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

2972

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

4968

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

1119

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

5251

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

4622

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

6094

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 183人学习