怎样在SQL中用ROW_NUMBER处理多表关联后的笛卡尔积去重

落杰酱_9486

落杰酱_9486

2026-11-18

949人浏览

原创

ROW_NUMBER() 必须配合 PARTITION BY 才能按主表分组独立编号,否则全局连续编号;推荐明细表预编号再 JOIN 以提升性能,且需避免 NULL 字段参与分区。

怎样在sql中用row_number处理多表关联后的笛卡尔积去重

ROW_NUMBER() 必须带 PARTITION BY 才能隔离分组编号

直接在多表 JOIN 后套 ROW_NUMBER() OVER (ORDER BY ...),编号会从 1 开始全局连续——比如主表 1 行、明细表 A 有 3 行、明细表 B 有 4 行,JOIN 后共 12 行,编号就是 1 到 12。这不是“每个主表记录下给子表独立编号”,而是把所有组合当一个大列表编了号。

真正起作用的是 PARTITION BY:它定义编号重置点。你要按主表唯一标识来分区,例如 PARTITION BY m.id,这样每个 m.id 对应的所有子表组合行才各自从 1 开始编号。

  • 漏写 PARTITION BY → 编号跨主表行连续,无法用于去重或取首行
  • 错用非主键字段(如 PARTITION BY b.status)→ 分区逻辑错乱,同一主表行可能被拆到多个分区
  • LEFT JOIN 场景下,b.id 为 NULL 的行不能放进 PARTITION BY,否则所有空行挤进同一组,编号崩溃

先预编号再 JOIN,比直接对大结果集开窗快得多

如果主表 10 万行、每行关联 50 条明细,JOIN 后中间结果达 500 万行,ROW_NUMBER() 得等全量数据生成完再排序编号——内存吃紧、执行慢、还容易触发磁盘临时表。

更优做法是:把明细表单独预编号,再和主表 JOIN。数据库能利用索引加速,且避免对笛卡尔积整体排序。

  • 写法示例:
    SELECT m.*, b.rn, b.content<br>FROM main_table m<br>LEFT JOIN (<br>  SELECT *, ROW_NUMBER() OVER (PARTITION BY a_id ORDER BY id) AS rn<br>  FROM detail_b<br>) b ON b.a_id = m.id
  • PostgreSQL / SQL Server 上这种拆分常提速 3–5 倍
  • MySQL 8.0+ 支持,但要注意子查询别名必须显式声明(不能省略 AS b)
  • SQLite 不支持 PARTITION BY,此方案不可用

取每组第一条时,WHERE 过滤比 CASE 更安全

常见写法是外层加 WHERE rn = 1 取首行。但若用 CASE WHEN b.id IS NULL THEN NULL ELSE ROW_NUMBER()... 再过滤,逻辑绕、可读差,且 NULL 值仍占一行位置,可能干扰后续聚合。

更直接的做法是:先确保预编号子查询只含有效关联行,再 LEFT JOIN;或者在最终 WHERE 中明确排除空值。

  • 要保留主表所有行(即使无明细),就用预编号子查询 + LEFT JOIN,然后 WHERE b.rn = 1 OR b.rn IS NULL
  • 只关心有明细的主表行,直接 WHERE b.rn = 1 即可,不用额外 CASE
  • 千万别在 PARTITION BY 里包含可能为 NULL 的字段(如 PARTITION BY b.category),否则所有 NULL 被归为一组,编号失真

不同数据库对 ROW_NUMBER() + JOIN 的行为差异

不是所有数据库都支持你写的语法。旧版 MySQL(FUNCTION xxx.ROW_NUMBER does not exist;SQLite 3.25+ 支持 ROW_NUMBER(),但不支持 PARTITION BY,只能做全局编号——这意味着它根本没法解决多表关联后的分组去重问题。

SQL Server 中若混用 TOP 和窗口函数,必须把 ROW_NUMBER() 放在子查询里,否则 TOP 会在编号前截断数据,导致结果错误。

  • MySQL 8.0+:支持完整语法,但子查询别名不可省略
  • PostgreSQL:支持,且 LATERAL 可替代部分预编号场景
  • SQL Server:推荐用 OUTER APPLY + TOP 1 替代,尤其当明细表有合适索引时更快
  • Oracle:支持,但注意 ORDER BY 中不能用列别名(得写原始字段名)

实际中最容易被忽略的,是预编号子查询是否真的覆盖了业务所需的排序逻辑——比如你按 id 排,但业务要求取最新一条,就得换成 ORDER BY created_at DESC, id DESC。编号本身没难度,难的是编号依据是否贴合真实需求。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

5083

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

1031

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1329

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

7161

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

3803

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

7160

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

10041

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1370

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1192

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.3万人学习