怎样分析MySQL 8.0公用表表达式CTE在底层的执行机制

云芳酱_4115

云芳酱_4115

2026-09-20

332人浏览

原创

mysql 8.0的cte是优化器可重写的查询块,非独立执行单元;默认不物化,常被内联,多次引用可能重复计算;递归cte强制迭代执行并用临时表;验证方式为explain format=tree。

怎样分析mysql 8.0公用表表达式cte在底层的执行机制

MySQL 8.0 的 CTE 不是视图,也不生成物化临时表(默认情况下)

CTE 在 MySQL 8.0 中本质是语法糖 + 优化器可重写的查询块,不是独立的执行单元。它不会像 PostgreSQL 那样自动物化(除非显式加 /*+ MATERIALIZE */ 提示),也不会像早期 MySQL 视图那样被简单地文本展开——优化器会根据成本模型决定是否内联、是否物化、是否递归展开。

这意味着:写一个 WITH t AS (SELECT ...),不等于“先算出 t 再用”,而更可能是“把 t 的定义直接塞进外层 WHERE/HAVING/JOIN 条件里一起优化”。

  • 若 CTE 只被引用一次,且无递归、无副作用,MySQL 几乎总是选择内联(EXPLAIN 显示为 DERIVED 或直接消失)
  • 若 CTE 被多次引用,又没加 MATERIALIZE,MySQL 仍可能重复计算(即“多次执行子查询”),而不是缓存结果
  • 递归 CTE(WITH RECURSIVE)强制走迭代执行路径,底层用内部临时表暂存每轮结果,有 cte_max_recursion_depth 限制

如何验证 CTE 实际是否被内联或物化?看 EXPLAIN FORMAT=TREE

这是最直接的方式。MySQL 8.0+ 的 FORMAT=TREE 会清晰展示 CTE 的处理策略:

  • 出现 > Materialize with deduplication> Materialize —— 表示该 CTE 被物化(用了临时表)
  • 出现 > Table scan on <derived></derived> 或直接嵌入到主查询树中 —— 表示已内联,未物化
  • 递归 CTE 会显示 > Recursive loop on <cte_name></cte_name> 及迭代层级结构

例如:

EXPLAIN FORMAT=TREE
WITH cte1 AS (SELECT id FROM orders WHERE status = 'shipped')
SELECT * FROM cte1 JOIN users USING(id);

如果 orders 有合适索引,你大概率看到的是单层 join 树,cte1 消失不见——说明被内联了。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载

MATERIALIZE 提示不是万能的,且受变量和版本限制

从 MySQL 8.0.22 起支持优化器提示 /*+ MATERIALIZE(cte_name) */,但它只在满足一定条件时才生效:

  • CTE 必须是 non-recursive;
  • 不能含用户变量、存储函数、OUTFILE 等不可重入操作;
  • cte_max_recursion_depth 对它无影响,但 tmp_table_sizemax_heap_table_size 会影响物化能否成功(超限会退回到磁盘临时表);
  • 即使加了提示,优化器仍可能忽略——比如发现内联代价更低,或物化后无法使用索引下推。

所以别盲目加 MATERIALIZE,先用 EXPLAIN FORMAT=TREE 看现状,再对比加提示后的执行树变化。

递归 CTE 的执行开销集中在迭代与临时表 I/O

递归 CTE 底层靠一个“工作表”(working table)循环存取数据:首轮执行 anchor member 得初始集,之后每轮用上一轮结果驱动 recursive member 执行,并将新行插入工作表,直到无新行产生或达到 cte_max_recursion_depth(默认 1000)。

  • 每次迭代都是一次独立的查询执行,涉及临时表读写、去重(若用 UNION)、索引查找;
  • 若 recursive member 缺少有效过滤条件(如没关联上 anchor 结果),极易产生笛卡尔爆炸;
  • 工作表默认在内存(MEMORY 引擎),但行数多或字段大时会转成磁盘 InnoDB 临时表,性能断崖下跌。

典型陷阱:WITH RECURSIVE t(n) AS (SELECT 1 UNION ALL SELECT n+1 FROM t) 没终止条件 → 直接触发 ERROR 3636 (HY000): Recursive query aborted after 1000 iterations

真正要调优递归 CTE,重点不在“怎么写语法”,而在控制每轮输出规模、确保 recursive member 能走索引、预估最大迭代深度并设合理上限。物化、提示、索引覆盖这些常规手段,在这里都得让位于迭代逻辑本身的设计。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mysql mysql 8.0 mysql优化

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

3663

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

771

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

949

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

5421

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2423

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

5400

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

7001

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

950

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

832

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 168人学习

使用phpenv集成环境安装极致CMS
使用phpenv集成环境安装极致CMS

共2课时 | 268人学习