如何排查由于单次 SQL 查询未加 LIMIT 限制,误全表扫描回传 500 万条记录引发的瞬间 OOM

大强君_2899

大强君_2899

2026-05-30

449人浏览

原创

单条无limit、无where的sql触发全表扫描并加载全部500万行至jvm堆内存,是典型的查询型oom;需通过应用堆栈、慢查日志rows_examined/rows_sent、sending data状态三处信号快速确认,并立即加limit止血、建索引优化、启用流式查询防控。

如何排查由于单次 sql 查询未加 limit 限制,误全表扫描回传 500 万条记录引发的瞬间 oom

直接锁定问题根源:单条 SQL 无 LIMIT、无 WHERE,触发全表扫描并把全部 500 万行结果一次性加载进 JVM 堆内存,是典型的“查询型 OOM”——不是内存泄漏,而是瞬时内存需求远超堆上限。

一、快速确认是否为该类 SQL 引发的 OOM

不翻完整日志,只抓三处关键信号:

  • 应用日志中出现 java.lang.OutOfMemoryError: Java heap space,且紧邻其上的堆栈含 queryForList、executeQuery、MysqlIO.readSingleRowSet 等 JDBC 数据读取方法;
  • MySQL 慢查日志(slow_query_log)里存在执行时间短但 Rows_examined 极高(如 500w+)、Rows_sent 同样为 500w+ 的语句;
  • 用 SHOW PROCESSLIST 或 performance_schema.threads 观察到某连接长时间处于 Sending data 状态,且 Info 字段显示的是无条件 SELECT 语句。

二、定位肇事 SQL 的实操路径

分三步向下穿透,避免陷入底层异常细节:

  • 看业务入口:从报错堆栈最上层的 Controller 或 Service 方法名入手(如 expireHoles、syncAllUsers),确认是哪个业务动作触发;
  • 查 DAO 层调用:找到对应方法中使用的 SQL 模板或 Mapper XML,检查是否硬编码了 SELECT * FROM xxx;
  • 验实际执行语句:开启 MySQL 的 general_log(临时),或在应用侧加日志打印最终拼接出的完整 SQL,确认它确实不含 WHERE、ORDER BY、LIMIT 任何约束。

三、立即止血与长效防控

线上优先保服务,再堵漏洞:

  • 紧急止血:在应用代码中对该 SQL 强制增加 LIMIT 1000(或按业务允许的最大值),并加 try-catch 包裹,防止再次崩掉整个服务线程;
  • SQL 层加固:在 MySQL 配置中设置 max_allowed_packet 合理上限(防大结果集传输),并启用 sql_safe_updates=ON(虽不直接限制 SELECT,但可联动规范开发习惯);
  • 开发侧卡点:在 CI 流程中加入 SQL 静态扫描规则,自动拦截无 WHERE + 无 LIMIT 的 SELECT 语句;在 MyBatis XML 中统一使用 <if test="page != null">LIMIT #{page.size}</if> 模板,禁止裸写 SELECT;
  • 替代方案落地:对确需全量导出的场景,改用流式查询(MyBatis 的 Cursor、JDBC 的 setFetchSize(Integer.MIN_VALUE))或分页拉取(WHERE id > ? ORDER BY id LIMIT 1000),避免内存驻留。

四、顺手检查 MySQL 是否已因该查询受伤

这类查询不仅压垮应用,也极易拖垮数据库本身:

  • 执行 EXPLAIN 查看该 SQL 的 type 是否为 ALL(全表扫描),若是,立刻建索引(如 CREATE INDEX idx_status ON table_name(status));
  • 检查 SHOW GLOBAL STATUS LIKE 'Created_tmp_tables' 是否突增——说明正在大量生成内存临时表,进一步加剧内存压力;
  • 观察 innodb_buffer_pool_pages_free 是否持续走低,确认 Buffer Pool 是否被大结果集缓存挤占,影响其他查询性能。
PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mybatis一级缓存和二级缓存
mybatis一级缓存和二级缓存

在MyBatis中,一级缓存和二级缓存是两种不同级别的缓存机制,它们都可以用来提高性能。本专题提供mybatis一级缓存和二级缓存相关文章,大家可以免费阅读。

2023.08.21

583

4

ibatis和mybatis有什么区别
ibatis和mybatis有什么区别

ibatis和mybatis的区别:1、基本信息不同;2、开发时间不同;3、功能与易用性;4、配置文件;5、入参类型与出参类型;6、返回结果集接受方式;7、语法差异;8、数据库方言支持;9、插件支持;10、社区活跃度;11、全球化支持。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

2522

5

mybatis如何配置数据库连接
mybatis如何配置数据库连接

mybatis配置数据库连接的方法:1、指定数据源;2、配置事务管理器;3、配置类型处理器和映射器;4、使用环境元素;5、配置别名。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

446

5

mybatis工作原理及流程是什么
mybatis工作原理及流程是什么

mybatis工作原理及流程:1、配置文件;2、接口与映射;3、sql解析与生成;4、执行计划;5、结果处理;6、动态sql;7、缓存机制;8、插件;9、事务管理;10、日志与监控;11、扩展性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

292

4

hibernate和mybatis有哪些区别
hibernate和mybatis有哪些区别

hibernate和mybatis的区别:1、实现方式;2、性能;3、对象管理的对比;4、缓存机制。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

302

5

Java MyBatis框架
Java MyBatis框架

本专题专注于Java主流ORM框架MyBatis的应用,系统讲解SQL映射、动态SQL、结果映射、分页查询、缓存机制与多表关联等核心内容,并结合企业管理系统、电商平台和后台管理项目实战,帮助学员全面掌握高效的数据库持久层开发技能。

2025.08.26

5769

22

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

2026.10.16

20

10

OpenJDK怎么配置Java开发环境
OpenJDK怎么配置Java开发环境

怎样用OpenJDK搭建开发环境?本专题介绍版本选择、下载安装、环境变量配置和编译运行验证,帮助你理清JDK的作用及基本配置流程,并通过简单程序检查环境是否可用,为后续项目开发做好准备。

2026.10.16

0

10

OpenJDK怎么部署Java应用
OpenJDK怎么部署Java应用

Java项目开发完成后,怎样部署到目标环境并正常运行?本专题介绍OpenJDK应用部署流程,涵盖运行环境准备、版本兼容检查、应用打包、启动参数配置和日志查看,帮助你理清部署前后的操作顺序,减少环境差异造成的运行问题。

2026.10.16

0

10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.7万人学习