SQL中如何使用ROW_NUMBER()解决分组去重问题?

落磊小哥_8845

落磊小哥_8845

2026-10-05

959人浏览

原创

row_number()不能直接去重,仅能编号;真正去重需通过partition by分组、order by排序(如created_at desc)、外层where rn=1筛选,以保留每组首行。

sql中如何使用row_number()解决分组去重问题?

ROW_NUMBER() 不能直接去重,但能帮你选出每组中“想要的那一条”——关键在配合 PARTITION BY 和 ORDER BY 控制排序逻辑。

为什么 ROW_NUMBER() 不是去重函数?

它只是给结果集里的每一行按规则打上序号,不会删数据。真正去重要靠外部筛选,比如只取 ROW_NUMBER() = 1 的行。

常见错误现象:
– 写了 SELECT *, ROW_NUMBER() OVER (...) FROM t 就以为重复没了
– 忘记 PARTITION BY,导致全表编号,分组失效
– ORDER BY 选错字段,比如用不稳定字段(如 id 随机)导致每次运行结果不一致

  • 去重目标必须明确:保留最新时间?最小ID?最高优先级值?
  • PARTITION BY 字段必须是你要“按什么分组”的依据(比如 user_id、order_no)
  • ORDER BY 要选确定性字段;若需稳定结果,可加二级排序,例如 ORDER BY created_at DESC, id DESC

典型场景:按 user_id 保留最新一条记录

假设表 user_login_log 有重复用户登录记录,你想每个 user_id 只留 created_at 最大的那条:

SELECT * FROM (
  SELECT *,
         ROW_NUMBER() OVER (
           PARTITION BY user_id 
           ORDER BY created_at DESC, id DESC
         ) AS rn
  FROM user_login_log
) t WHERE rn = 1;

注意:
– created_at DESC 确保最新时间排第一
– 补上 id DESC 是为了当时间相同时结果可重现(避免优化器随机选行)
– 别在外部查询里再写 GROUP BY,会干扰窗口函数行为

和 DISTINCT、GROUP BY 的本质区别在哪?

DISTINCT 是基于所有 SELECT 字段值完全一致才合并;GROUP BY 必须配聚合函数,无法直接返回原始行。而 ROW_NUMBER() 方案可以:
– 完整保留你想留下的那行所有字段
– 支持复杂排序逻辑(比如“优先选 status=1 的,其次按时间”)
– 可扩展为取第2条、倒数第1条等灵活需求

性能提示:
– PARTITION BY + ORDER BY 字段最好有联合索引,例如 (user_id, created_at, id)
– 在大数据量下,子查询套一层可能比 CTE 稍快(取决于数据库版本,PostgreSQL 12+、MySQL 8.0+ 差异已不大)
– 如果只是简单去重且字段少,DISTINCT ON (user_id) ... ORDER BY user_id, created_at DESC(PostgreSQL)更简洁

最容易被忽略的是:窗口函数执行顺序在 WHERE 和 GROUP BY 之后、ORDER BY 之前。所以你不能在主查询的 WHERE 里直接引用 ROW_NUMBER(),必须用子查询或 CTE 包一层——这个嵌套不是可选项,是 SQL 执行模型决定的硬约束。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

3983

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

851

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1029

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

5841

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2763

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

5820

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

7721

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1050

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

912

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习