为什么SQL存储过程执行时报内存溢出错误_通过优化大表关联与减少游标使用解决

小伟吖_7142

小伟吖_7142

2026-06-01

768人浏览

原创

答案是sp_head::main_mem_root内存未释放所致;需查performance_schema中memory/sql/sp_head::main_mem_root用量超1gb即确认,且必须显式close游标、加异常处理、避免大结果集fetch。

为什么sql存储过程执行时报内存溢出错误_通过优化大表关联与减少游标使用解决

MySQL 存储过程执行时报内存溢出,基本不是“内存不够”这种表层问题,而是 sp_head::main_mem_root 这块 SQL 层专属内存被游标、临时表或触发器持续占满,最终触发 OOM Killer 杀掉 mysqld。它不走 innodb_buffer_pool_size 管控,也不会随过程退出自动释放——关不掉游标,就等于内存永远挂着。

怎么确认是 sp_head::main_mem_root 吃光内存

别猜,直接查 performance_schema:

  • 先确保监控已开:SELECT VARIABLE_VALUE FROM performance_schema.global_variables WHERE VARIABLE_NAME = 'performance_schema_instrument',返回含 memory/% = COUNTED 才有效
  • 运行:SELECT EVENT_NAME, CURRENT_NUMBER_OF_BYTES_USED FROM performance_schema.memory_summary_global_by_event_name WHERE EVENT_NAME LIKE 'memory/sql/sp_head%'
  • 重点盯 memory/sql/sp_head::main_mem_root 这一行:如果 >1GB(尤其远超你的 innodb_buffer_pool_size),八成就是它
  • 配合 SHOW PROCESSLIST 看有没有长期卡在 executingSending data 的连接,且对应 SQL 含 DECLARE CURSOR FOR SELECT

游标必须显式 CLOSE,且异常路径也要覆盖

MySQL 不会在存储过程退出时自动释放游标占用的 main_mem_root 内存,哪怕你用 LEAVE 跳出循环,只要没 CLOSE,这块内存就一直驻留。

AI智研社
AI智研社

一个围绕人工智能技术与应用建立的综合性AI知识平台,提供相关内容和学习资源。

下载
  • 每个 DECLARE CURSOR cursor_name 后,必须紧跟着配对的 CLOSE cursor_name,且放在 END 之前
  • 必须加异常处理:DECLARE CONTINUE HANDLER FOR SQLEXCEPTION BEGIN CLOSE cursor_name; LEAVE proc_label; END;
  • 如果游标在嵌套块(如 BEGIN ... END)里声明,CLOSE 也得写在同级块内,跨块无效
  • 不要依赖“过程结束自动清理”——这是 MySQL 5.7/8.0 都未实现的假定

大表关联别硬 JOIN,改用分批主键拉取

存储过程中大表 JOIN 报内存溢出,90% 是因为 MySQL 被迫把整个右表加载进内存建哈希表。调 join_buffer_size 治标不治本,还可能引发并发 OOM。

  • 适用前提:左右表都有可排序字段(如自增 idcreated_at
  • 第一步:分段查左表主键,用游标式分页(禁用 LIMIT OFFSET):SELECT id FROM orders WHERE id > ? ORDER BY id LIMIT 1000
  • 第二步:用这批 id 精准拉右表:SELECT o.*, u.name FROM orders o JOIN users u ON o.user_id = u.id WHERE o.id IN (1001,1002,...)IN 列表长度建议 ≤1000
  • 两个查询都必须在关联字段(user_idid)上建索引,否则 IN 会退化成全表扫描
  • 检查 EXPLAIN 输出,避免出现 Using join buffer (Block Nested Loop) —— 有就说明没走索引,分批也白搭

临时表必须显式建索引,禁用 CREATE TEMPORARY TABLE SELECT

MySQL 中 CREATE TEMPORARY TABLE SELECT 会跳过索引定义阶段,后续大结果集 JOINORDER BY 就容易爆内存;而 SELECT INTO 在 SQL Server 里同样危险,它隐式锁+无索引+日志膨胀。

  • 正确做法:先 CREATE TEMPORARY TABLE #temp (...) 显式声明结构,再 CREATE INDEX 关键字段(如 CREATE INDEX IX_temp_status ON #temp (status_id)),最后 INSERT INTO #temp SELECT ...
  • 避免在循环中反复向同一临时表 INSERT;大数据量场景下,每批处理完应 DROP TEMPORARY TABLE #temp
  • 慎用 CTE 替代临时表:MySQL 8.0 默认强制物化,比带索引的临时表更占内存;仅当 CTE 只被引用一次、无聚合/窗口函数时才考虑

真正难缠的不是语法写错,而是 sp_head::main_mem_root 这种不释放、不报警、只等 OOM Killer 动手的隐性内存泄漏——它藏在游标没关、临时表没索引、分批逻辑漏索引这些细节里,一并发就线性爆炸。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

3703

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

791

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

949

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

5481

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2463

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

5460

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

7101

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

970

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

852

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.1万人学习