在MySQL 5.7中为什么默认开启衍生表合并优化Derived Merge

阿墨小哥_1947

阿墨小哥_1947

2026-11-21

431人浏览

原创

MySQL 5.7 默认开启 derived_merge=on 是为了提升简单视图和子查询性能,通过将子查询逻辑展开进外层SQL统一优化,避免物化临时表、保留索引下推、减少I/O与内存开销;但含 GROUP BY、DISTINCT、聚合函数等语义复杂结构时会自动失效,强制物化以保证结果正确性。

在mysql 5.7中为什么默认开启衍生表合并优化derived merge

为什么 MySQL 5.7 默认开启 derived_merge=on

因为绝大多数简单视图和子查询能通过合并获得显著性能提升——避免物化临时表、保留索引下推能力、减少 I/O 和内存开销。

MySQL 5.7 引入 derived_merge 的核心目标,是把原本要“先执行子查询、写临时表、再对外层过滤”的三步流程,压缩成一步:直接将子查询逻辑展开进外层 SQL,让优化器统一规划访问路径。比如:

SELECT * FROM (SELECT id, name FROM users WHERE status = 1) AS t WHERE t.name LIKE 'A%';

开启 derived_merge=on 后,MySQL 实际按等价于下面这条语句优化:

SELECT id, name FROM users WHERE status = 1 AND name LIKE 'A%';

这样就能直接走 status + name 的复合索引,而不是先扫全量 status = 1 的行、建临时表、再对临时表做模糊匹配。

  • 合并后,外层 WHERE 条件可下推到基表扫描阶段,大幅减少中间结果集
  • 避免临时表无索引问题(DERIVED 表默认不建索引)
  • 减少磁盘临时表落盘风险(尤其当 max_heap_table_size 小于物化结果时)
  • 对不含聚合、GROUP BY、DISTINCT 的扁平视图,合并几乎总是更优

EXPLAIN 中看不到 DERIVED 不代表没合并,要看 select_type 和执行计划结构

很多人误以为只要 EXPLAIN 输出里没出现 DERIVED 行,就说明没物化——其实恰恰相反:select_type 是 SIMPLE 或 PRIMARY,且原视图的 GROUP BY 或子查询结构“消失”了,大概率就是被合并了。

例如建了一个含 GROUP BY 的视图:

CREATE VIEW v_user_stats AS SELECT user_id, COUNT(*) c FROM orders GROUP BY user_id;

然后执行:

win可用的mysql指令skill
win可用的mysql指令skill

安装、修复、更新或打包一个基于 Python 和 PyMySQL 实现的 Windows `mysql` 命令。适用于用户希望在 PowerShell/CMD 中输入 `mysql` 时重定向到 Python 实现、需要交互式输入 MySQL 连接信息、需要同步到当前用户本地 bin 目录,或需要将该能力封装成可公开复用的 Codex skill。

下载
SELECT * FROM v_user_stats WHERE user_id = 123;

若 derived_merge=on 且视图可安全合并,EXPLAIN 可能显示 select_type = SIMPLE、table = orders,但你找不到 GROUP BY 字段——因为优化器已尝试把它“折叠”进外层,只是此时会因语义限制失败,最终仍走物化。真正判断依据是:

  • select_type = DERIVED → 明确物化,一定没合并
  • select_type = SIMPLE 但 Extra 出现 Using temporary; Using filesort → 合并尝试失败,退化为物化但未显式标记
  • UPDATE/DELETE 中引用该视图直接报错 ER_UPDATE_TABLE_USED → 合并被禁止,且优化器拒绝执行

哪些结构会让 derived_merge 自动失效

不是所有视图都能被合并。MySQL 在语义安全前提下才启用该优化,以下情况会强制跳过合并、走物化路径:

  • 视图定义含 GROUP BY、DISTINCT、聚合函数(COUNT()、SUM() 等)
  • 含 UNION 或子查询出现在 SELECT 列表中(如 (SELECT MAX(x) FROM t2))
  • 外层查询有 ORDER BY ... LIMIT,而视图内无对应排序字段(为保结果确定性禁用合并)
  • 视图引用了不可下推的表达式,如 IFNULL(col, 'default')、用户变量、UUID() 等非确定性函数
  • 在 UPDATE 或 DELETE 的 FROM 子句中使用该视图(MySQL 认为物化更可控)

这些限制不是 bug,而是语义保证:比如 GROUP BY 视图合并后,外层加 WHERE 可能改变分组基数,结果就不等价了。

关闭 derived_merge 不是万能解药,反而可能放大问题

临时设 SET SESSION optimizer_switch='derived_merge=off' 确实能让视图强制物化,但代价明显:

  • 物化表无索引,后续过滤全靠扫描;若结果集大,max_heap_table_size 不足就会落磁盘,I/O 暴增
  • 外层 WHERE 条件无法下推,必须等整个子查询执行完才过滤,中间数据膨胀严重
  • 对多表 JOIN 场景,物化后可能引发笛卡尔积放大(尤其当物化表作为驱动表时)
  • 仅对当前 session 生效,上线前容易遗漏,线上排查困难

真正稳健的做法,是在建视图时就明确控制行为:ALGORITHM=TEMPTABLE 比动态关开关更可靠——它绕过所有合并逻辑,且不受全局 optimizer_switch 影响。而 ALGORITHM=MERGE 只是建议,MySQL 仍可能因上述语义限制自动降级。

复杂点在于:是否物化,不只取决于开关,还取决于视图结构、外层查询形态、甚至统计信息是否准确。一次 EXPLAIN 看不出全貌,得结合 ANALYZE TABLE 和真实数据量交叉验证。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

5163

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

1051

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1349

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

7261

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

3883

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

7240

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

10201

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1390

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1212

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程