怎样在SQL查询中使用DISTINCT关键字去除重复的记录?

星雪吖_7686

星雪吖_7686

2026-06-09

701人浏览

原创

distinct必须紧随select后作用于整行,不可修饰单字段或用于子句;去重基于字段组合全匹配,null视为相等;不能与聚合函数混用,order by字段须在select列表中;语义上不同于group by,且去重发生在最终结果集。

怎样在sql查询中使用distinct关键字去除重复的记录?

DISTINCT 只能放在 SELECT 后紧跟着,不能用在子句或表达式中间

DISTINCT 不是函数,也不是修饰某个字段的开关,它作用于整行结果。写成 SELECT name, DISTINCT ageSELECT DISTINCT(name) 都会报错——MySQL 会提示 ERROR 1064,PostgreSQL 直接拒绝解析。

正确写法只有一种:把 DISTINCT 紧跟在 SELECT 后面,后面接你要查的字段列表:

SELECT DISTINCT country, city FROM users;

这表示“返回所有唯一的 country+city 组合”,哪怕两个用户城市相同但国家不同,也会被当作不同行保留。

  • 如果只查一个字段(如 SELECT DISTINCT status),它去重的是该字段值本身
  • 如果查多个字段,去重逻辑基于字段组合的“全匹配”,不是单个字段独立去重
  • ORDER BY 中引用的字段必须出现在 SELECT 列表里(尤其在启用了 ONLY_FULL_GROUP_BY 的 MySQL 8.0+ 中)

用 GROUP BY 替代 DISTINCT 时要注意语义和性能差异

很多人发现 SELECT DISTINCT a, b FROM tSELECT a, b FROM t GROUP BY a, b 返回结果一样,就以为可以互换。其实不然:

  • DISTINCT 是纯去重操作,不保证顺序,也不允许在 SELECT 中出现未分组字段(比如 SELECT DISTINCT a, b, c FROM t 会报错,除非 c 是确定值)
  • GROUP BY 是分组聚合的基础,后续可接 MIN()COUNT() 等聚合函数;而 DISTINCT 后不能跟聚合(SELECT DISTINCT COUNT(*) 是非法语法)
  • 某些场景下 GROUP BYDISTINCT 更慢,因为优化器可能强制排序;但也有反例——当有合适索引时,MySQL 对 GROUP BY 的松散索引扫描优化可能比 DISTINCT 更高效

带 WHERE 或 JOIN 时,DISTINCT 去重发生在最终结果集上

这是最容易误解的一点:DISTINCT 不会提前过滤掉“JOIN 过程中产生的重复中间行”,而是等所有 JOIN、WHERE 执行完,生成完整结果集之后才去重。

Tana
Tana

一款基于节点式结构和超级标签的AI智能笔记工具,将笔记、任务和知识组织结合到统一的工作空间中。

下载

比如你查订单和用户关联数据:

SELECT DISTINCT u.id, u.name FROM users u JOIN orders o ON u.id = o.user_id;
如果某个用户下了 5 单,这条语句仍会先生成 5 行(每行 u.id/u.name 相同),再合并成 1 行。这不是低效,而是设计如此。
  • 若想减少中间膨胀,优先在 JOIN 条件或 WHERE 中加限制(例如 WHERE o.status = 'paid'
  • 若只是要用户列表,且不关心订单细节,考虑用 EXISTS 替代 JOIN:SELECT id, name FROM users u WHERE EXISTS (SELECT 1 FROM orders o WHERE o.user_id = u.id),通常更快也更直观
  • 注意 NULL 值:所有 NULL 被视为相等,DISTINCT 会把多行 NULL 合并为一行

在窗口函数或子查询里不能直接用 DISTINCT 修饰部分列

有人想“只对某几列去重,其他列取任意值”,比如“每个部门取薪资最高的员工姓名”。这时不能写 SELECT DISTINCT dept, MAX(salary), name——语法错误,且语义不清。

正确解法取决于需求:

  • 要最新一条记录?用 ROW_NUMBER() OVER (PARTITION BY dept ORDER BY hire_date DESC) + 外层过滤 rn = 1
  • 要聚合后附带某字段?必须明确规则,比如“取 salary 最高者中 id 最小的那条”:SELECT dept, MAX(salary), MIN(CASE WHEN salary = MAX(salary) THEN id END)(需配合 GROUP BY)
  • 某些数据库支持 DISTINCT ON(PostgreSQL):SELECT DISTINCT ON (dept) dept, salary, name FROM employees ORDER BY dept, salary DESC,但这是 PostgreSQL 特有语法,不可移植

真正难的不是写对 DISTINCT,而是想清楚“你到底想保留哪一行”——这个逻辑一旦模糊,加再多 DISTINCT 也没用。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

3643

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

771

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

929

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

5381

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2403

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

5380

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

6961

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

950

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

832

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133万人学习