SQL基础查询中DISTINCT和GROUP BY去重到底该怎么选择?

千丽吖_3453

千丽吖_3453

2026-07-11

339人浏览

原创

distinct用于获取唯一值列表,如部门名、城市名等,而group by用于分组统计;二者语义不同,不可混用,且需根据业务需求(是否需保留特定行)选择合适方法。

sql基础查询中distinct和group by去重到底该怎么选择?

只想要唯一值列表,用 DISTINCT

比如查所有不重复的部门名、城市名、用户邮箱——没有统计需求,只要“有哪些”,DISTINCT 就是直觉且正确的选择。

常见错误是硬套 GROUP BY 去实现这个目标,结果要么报错(only_full_group_by 开启时),要么返回不可靠数据(关闭时随机取某一行)。

  • DISTINCT 对整行去重:只有所有选中的字段值完全一致,才算重复
  • 支持多列组合去重,例如 SELECT DISTINCT user_id, order_date FROM orders 表示“同一用户同一天只留一条”
  • NULL 被视为一个独立值,多个 NULL 只保留一个
  • 不能和聚合函数混用,像 SELECT DISTINCT COUNT(*) 是语法错误

要按字段分组并算总数/平均值/最大值,必须用 GROUP BY

一旦业务问题里出现“每个……有多少”“平均……是多少”“最高……是哪个”,就不是去重问题,而是分组统计问题,GROUP BY 是唯一合规解法。

典型误区是写 SELECT dept, salary FROM emp GROUP BY dept 试图“去重部门并保留薪资”,这在 MySQL 8.0+ 默认配置下直接报错:Expression #2 of SELECT list is not in GROUP BY clause;即使关掉 only_full_group_by,salary 也会随机取分组内某条记录,结果不可信。

Zoom Workplace
Zoom Workplace

Zoom Workplace是一款AI办公效率工具,Zoom推出的AI办公协作和交流沟通平台。

下载
  • 非分组字段必须显式聚合,例如 SELECT dept, MAX(salary) FROM emp GROUP BY dept
  • 多字段分组时,GROUP BY dept, role 意味着“按部门+角色组合分组”,不是分别去重
  • 想同时去重又统计,得嵌套:先 DISTINCT 子查询生成唯一组合,再外层 GROUP BY

大数据量下性能差异明显,别凭感觉选

100 万行以上数据时,DISTINCT 和 GROUP BY 的执行计划可能完全不同,尤其涉及多列或无索引字段。

  • 单列去重:通常 DISTINCT 更快,数据库对纯去重有哈希优化
  • 多列组合去重(如 user_id, product_id):GROUP BY 在某些引擎下反而更稳,因它天然走排序分组路径
  • 没索引的字段上用 DISTINCT,容易触发临时表 + 文件排序,比 GROUP BY 更吃内存
  • 实际执行前,务必用 EXPLAIN 看是否走了索引,而不是只看语句“看起来简洁”

业务说“账单号去重,保留最新金额”,这不是 DISTINCT 或 GROUP BY 能直接解决的

这是典型的“单字段去重 + 保留指定行”的需求,DISTINCT 无法控制留哪条,GROUP BY 随机取值也不安全。真要这么做,得用窗口函数或子查询。

  • MySQL 8.0+ 推荐:用 ROW_NUMBER() OVER (PARTITION BY bill_no ORDER BY create_time DESC) 标记每组最新记录
  • 旧版本可借 JOIN 或 WHERE NOT EXISTS 找出“不存在更新时间更大的同账单号记录”的行
  • 强行用 GROUP BY bill_no 配 MAX(amount),得到的是最大金额,不是最新那笔的金额——两者语义不同

真正容易被忽略的,是业务语言里的“去重”常常隐含了“保留哪一条”的规则,而 SQL 的 DISTINCT 和 GROUP BY 都不承诺这个行为。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

3823

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

811

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

989

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

5621

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2583

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

5600

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

7361

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1010

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

872

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.2万人学习