SQL中如何利用ROW_NUMBER()过滤重复的历史订单?

千宇酱_1298

千宇酱_1298

2026-09-10

766人浏览

原创

核心思路是用row_number()配合partition by order_id和order by created_at desc为每组订单按时间倒序编号,取rn=1的最新记录;必须用cte或子查询生成序号,不可在where中直接使用,且建议添加id等唯一字段兜底确保排序稳定。

sql中如何利用row_number()过滤重复的历史订单?

用 ROW_NUMBER() 给订单按时间排序并标记序号

核心思路是:把同一订单号的多条记录按时间(比如 created_at)倒序排,最新的一条标为 1,再用外层查询只取 rn = 1 的行。注意必须用 ORDER BY 明确指定排序依据,否则 ROW_NUMBER() 的结果不可预测。

常见错误是直接在 WHERE 中用 ROW_NUMBER() —— 它不能出现在 WHERE 子句里,必须先放在子查询或 CTE 中生成序号列。

  • PARTITION BY order_id 是关键:确保每个订单号内部独立编号
  • 排序方向很重要:ORDER BY created_at DESC 才能保证最新记录得 1;若用 ASC,反而会保留最老的那条
  • 如果存在毫秒级时间戳但业务上认为“同秒即重复”,建议先用 DATE_TRUNC('second', created_at)CAST(created_at AS TIMESTAMP(0)) 统一精度,再排序

CTE 方式写法最清晰、易调试

相比嵌套子查询,CTE 更易读且支持多次引用。调试时可先运行 CTE 部分,确认 rn 列是否符合预期。

WITH ranked_orders AS (
  SELECT *,
         ROW_NUMBER() OVER (
           PARTITION BY order_id 
           ORDER BY created_at DESC, id DESC
         ) AS rn
  FROM orders
)
SELECT * FROM ranked_orders WHERE rn = 1;

这里加了 id DESC 作为第二排序条件,是为了在 created_at 完全相同时,稳定地选中最大 id 的那条(通常对应最后插入的记录)。不加这个可能导致相同时间下结果不稳定。

Reddo
Reddo

一款AI视频创作工具,主要用于Reddo产品搜索引擎,说出需求,直达产品/游戏/工具/公司/工作/文章/视频/商品,适合需要提升相关任务效率的用户。

下载

WHERE 条件要放在 CTE 外层还是内层?

性能和语义都要求:过滤条件尽量下推到 CTE 内部。比如只查「近 30 天」的去重订单,应该写在 CTE 的 FROM 子句后,而不是外层 SELECT 后。

  • ✅ 正确(先缩小数据集,再分区编号):
    FROM orders WHERE created_at >= NOW() - INTERVAL '30 days'
  • ❌ 低效(全表编号后再过滤):
    外层加 AND created_at >= ...,会导致无谓的大量 ROW_NUMBER() 计算
  • 如果过滤字段不在 PARTITION BYORDER BY 中,下推不影响逻辑正确性,但能显著减少内存和 CPU 开销

ORDER BY 中用了表达式或函数会影响性能

比如写成 ORDER BY DATE(created_at)ORDER BY UPPER(customer_name),会让数据库无法使用索引加速排序,尤其在大表上可能触发磁盘临时文件。

更稳妥的做法是:提前建好函数索引(如 PostgreSQL 的 CREATE INDEX ON orders ((DATE(created_at)))),或在应用层/ETL 中预计算好归一化字段存为新列(如 order_date),然后直接按该列排序。

另外,ROW_NUMBER() 是窗口函数,不支持在 GROUP BY 查询中直接混用——想同时聚合(如统计每个订单的总金额)又去重,得用两层嵌套或先去重再聚合。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

3723

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

791

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

969

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

5501

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2503

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

5500

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

7141

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

970

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

852

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.1万人学习