为什么在SQL中使用JOIN替代IN能显著降低IO消耗

云强姑娘_6864

云强姑娘_6864

2026-10-24

397人浏览

原创

in子查询在mysql 5.7及更早版本中易重复执行,导致n次扫描;mysql 8.0+支持semi-join优化但有条件限制;join改写可提升性能,但需确保关联字段有索引且执行计划显示type为ref/eq_ref。

为什么在sql中使用join替代in能显著降低io消耗

IN子查询在MySQL 5.7及更早版本中容易触发重复执行

当写成 SELECT * FROM orders WHERE customer_id IN (SELECT id FROM customers WHERE status = 'active'),MySQL 5.7 及之前版本常将其识别为“相关子查询”,导致外层每扫描一行 orders,就重新执行一次子查询——哪怕子查询本身不依赖外层字段。这会引发 N 次独立的 customers 表扫描或索引查找,IO 直接翻倍。EXPLAIN 中常见 dependent subquery 或 Using temporary。

  • 即使子查询非相关,优化器也可能先物化结果到磁盘临时表(尤其结果集 > tmp_table_size),再做哈希匹配,引入额外随机IO
  • 若子查询含 GROUP BY、LIMIT 或 ORDER BY,几乎必然走临时表+文件排序路径
  • MySQL 8.0+ 默认开启 semijoin=on,但需满足条件:子查询不能有聚合、无 DISTINCT、关联字段有索引,否则仍退化

JOIN能复用索引并启用高效连接算法

改写为 SELECT o.* FROM orders o JOIN customers c ON o.customer_id = c.id WHERE c.status = 'active' 后,数据库明确知道这是两个集合的关联操作,可选择嵌套循环(带索引查找)、块嵌套循环或哈希连接(MySQL 8.0+)。

  • orders.customer_id 和 customers.id 都必须有索引,否则 type 仍为 ALL,JOIN 不比 IN 强
  • 如果 customers 是小表,MySQL 可能为其构建内存哈希表,然后单次扫描 orders,对每行用 customer_id 做 O(1) 查找
  • 执行计划中看到 type: ref 或 eq_ref,且 key 列非 NULL,才是索引真正生效

IN列表过长时,SQL解析和网络传输本身就在消耗IO

当应用拼出 WHERE id IN (1,2,3,...,100000) 这类语句,问题早已不在执行阶段:10 万个整数字符串需要 MySQL 解析器逐个 tokenize,消耗大量 CPU 和内存;超长 SQL 还可能触发 max_allowed_packet 截断或解析失败。

  • 网络传输一个几十KB的SQL包,比发三条短命令(CREATE TEMPORARY TABLE + INSERT + JOIN)更不可靠
  • 临时表方案中,INSERT 可批量提交(如每 1000 行一批),而 IN 列表无法分批
  • 数据库对长 IN 列表的统计信息估算不准,容易选错执行计划,比如跳过 eq_range_index_dive_limit(默认200)后直接放弃索引深度分析

NOT IN 的NULL陷阱会隐式放大IO

WHERE col NOT IN (SELECT nullable_col FROM t) 只要子查询返回任意 NULL,整个条件恒为 UNKNOWN,结果集为空——这不是逻辑错误,而是语义陷阱。为规避它,有人强行加 WHERE nullable_col IS NOT NULL,但这会让子查询失去索引覆盖能力,被迫全表扫描。

  • 用 LEFT JOIN ... WHERE ... IS NULL 替代,逻辑清晰且索引友好:SELECT o.* FROM orders o LEFT JOIN customers c ON o.customer_id = c.id AND c.status = 'active' WHERE c.id IS NULL
  • LEFT JOIN 的 ON 条件中把过滤下推(c.status = 'active'),避免先 JOIN 再 WHERE 导致中间结果膨胀
  • 注意:若 customers.id 是主键,c.id IS NULL 能准确表达“未匹配”,无需担心 NULL 干扰

实际改写时最容易被忽略的是:JOIN 改写后是否真的减少了数据读取量?重点看 EXPLAIN 的 rows 和 Extra 字段——如果仍是 Using join buffer 或 Using temporary,说明驱动表没选对,或者缺少关键索引,光换语法没用。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

4483

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

931

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1169

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

6441

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

3223

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

6400

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

8761

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1190

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1032

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.9万人学习