如何在SQL Server中利用T-SQL窗口函数优化分组去重

胖辰君_5279

胖辰君_5279

2026-09-06

621人浏览

原创

sql server分组去重必须用row_number()配合cte或子查询,因distinct无法指定保留行、group by强制非聚合字段全出现在分组列表中,而qualify不被支持。

如何在sql server中利用t-sql窗口函数优化分组去重

SQL Server 中分组去重必须用 ROW_NUMBER() 配合子查询或 CTE,QUALIFY 不可用,硬上会报错。

为什么不能直接用 DISTINCT 或 GROUP BY 做“保留最新一条”的分组去重

因为 DISTINCT 是对整行去重,无法控制“留哪一条”;GROUP BY 要求所有非聚合字段都出现在 GROUP BY 列表里,否则 SQL Server 会直接报错(如 Column 'name' is invalid in the select list)。你想取每个 user_id 的最新订单,但还要带出 order_id、amount、created_at 等字段——这时候只有窗口函数能保全原始行结构。

常见翻车点:

  • 写 SELECT user_id, order_id, MAX(created_at) FROM orders GROUP BY user_id → 报错,order_id 没在 GROUP BY 里
  • 强行加 order_id 进 GROUP BY → 结果变成每个 (user_id, order_id) 组都返回一行,根本没去重
  • 用 DISTINCT user_id, order_id, created_at → 所有记录都不同,毫无效果

ROW_NUMBER() + CTE 是 SQL Server 最稳的分组去重写法

核心逻辑:先按业务规则排序(比如 ORDER BY created_at DESC),再编号,最后只取每组第 1 名。

示例:取每个用户最新一条登录记录

WITH ranked AS (
  SELECT *,
         ROW_NUMBER() OVER (
           PARTITION BY user_id 
           ORDER BY login_time DESC
         ) AS rn
  FROM logins
)
SELECT user_id, login_time, ip_address
FROM ranked
WHERE rn = 1;

关键注意点:

  • PARTITION BY 字段必须是你想“分组”的依据,比如 user_id、device_id,别漏或多写
  • ORDER BY 决定谁是“最新”或“最优”,时间字段要带方向(DESC 取最新,ASC 取最早)
  • 如果存在完全相同的 login_time,ROW_NUMBER() 仍会强制编号(1,2,3…),结果不确定;可追加 id 作为次序键: ORDER BY login_time DESC, id DESC

删除重复数据时,ROW_NUMBER() 必须配合 CTE 或子查询才能 DELETE

SQL Server 不允许直接在 DELETE 语句里用窗口函数,所以必须把编号逻辑封装进 CTE,再对 CTE 执行删除。

示例:删除 DeviceAlarms 表中设备+告警类型+时间完全相同的重复项(仅保留 ID 最小的一条)

WITH dups AS (
  SELECT *,
         ROW_NUMBER() OVER (
           PARTITION BY DeviceId, AlarmType, AlarmTime 
           ORDER BY Id
         ) AS rn
  FROM DeviceAlarms
)
DELETE FROM dups WHERE rn > 1;

这个写法安全且高效,但要注意:

  • 不要用 ORDER BY Id DESC 然后删 rn > 1 —— 那会把最小 ID 留下,但编号顺序反了,逻辑易错
  • 大表操作前务必 BEGIN TRANSACTION,验证后再 COMMIT
  • 若表无主键或 Id 不唯一,改用 %%physloc%% 或临时加标识列,但风险高,不推荐

DENSE_RANK() 和 RANK() 在去重场景里基本没用

它们设计目标是「并列排名」,不是「去重」。比如三个相同值,DENSE_RANK() 返回 1,1,1,ROW_NUMBER() 返回 1,2,3 —— 但你删 rn > 1 时,DENSE_RANK() 会把三行全留下,起不到去重作用。

真正需要去重时,只认 ROW_NUMBER();如果只是想展示“去重后的名次”(比如每个部门薪资前三名,相同薪资并列且不跳号),才考虑 DENSE_RANK(),但它不能替代去重动作本身。

最常被忽略的一点:窗口函数的结果不能直接用于 WHERE,必须套一层 CTE 或子查询——这个语法限制在 SQL Server 里没有绕过办法,硬写会报 Invalid column name 'rn'。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

4223

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

891

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1089

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

6121

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2983

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

6080

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

8201

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1110

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

972

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习