如何在SQL中高效合并重复记录的数值_通过GROUP BY与临时表转换

大强君_2899

大强君_2899

2026-05-30

852人浏览

原创

用 group by 配合聚合函数(如 sum、max)是合并重复记录数值最通用、最可控的方式;临时表仅在需多步处理时引入,非必需。核心是「按关键字段分组 → 对数值字段聚合」,须明确重复定义列与待合并数值列,避免漏写 group by 非聚合列导致报错;union all + group by 适合多源临时表合并,优于 join;不同聚合函数语义不同,不可混用;临时表应限于数据清洗或多次复用场景,命名需具业务含义;合并前须验证重复行的业务合理性。

如何在sql中高效合并重复记录的数值_通过group by与临时表转换

直接说结论:用 GROUP BY 配合聚合函数(如 SUM、MAX)是合并重复记录数值最通用、最可控的方式;临时表只在需要多步中间处理时才引入,不是必须环节。

GROUP BY 合并重复数据的核心写法

本质是「按关键字段分组 → 对数值字段做聚合」。关键在于明确哪几列定义“重复”,哪些列要被合并(通常是数值型)。

  • 如果只按 product_id 合并销量:SELECT product_id, SUM(sales) AS total_sales FROM orders GROUP BY product_id
  • 如果需同时保留分类和品牌,并合并数量:SELECT category, brand, SUM(quantity) AS qty_total FROM inventory GROUP BY category, brand
  • 错误示范:漏写 GROUP BY 中的非聚合列,会触发 ONLY_FULL_GROUP_BY 报错,例如 SELECT name, age, SUM(score) FROM students GROUP BY name —— age 既没在 GROUP BY 里,也没被聚合,MySQL 8.0+ 默认拒绝执行

UNION ALL + GROUP BY 处理多源临时表合并

当你要把多个结构一致的临时表(比如 #tmp1、#tmp2)里的同 ID 数值加总,UNION ALL 比 JOIN 更轻量、更可靠。

  • 推荐写法:SELECT id, SUM(num) AS total_num FROM (SELECT id, num FROM #tmp1 UNION ALL SELECT id, num FROM #tmp2) t GROUP BY id
  • 不用 UNION:它会去重再合并,可能意外丢掉本该相加的重复行
  • 不建议用 FULL OUTER JOIN:SQL Server 支持,但 MySQL 不支持;即使支持,逻辑也更绕,且对 NULL 处理容易出错(比如 ISNULL(t1.num,0)+ISNULL(t2.num,0) 在三表以上就难维护)
  • 扩展性:加第三个表只需追加 UNION ALL SELECT id, num FROM #tmp3,无需改主逻辑

避免 GROUP BY 引发的语义歧义

合并数值不等于“随便挑一条”。不同聚合函数带来完全不同的业务含义:

  • SUM():适用于累加类指标(订单数、库存量、金额)
  • MAX() 或 MIN():适用于取最新/最早状态(如最新审核时间、最高评分),但需确认字段语义是否允许丢弃其余值
  • STRING_AGG()(PostgreSQL/SQL Server 2017+)或 GROUP_CONCAT()(MySQL):用于拼接字符串(如把同一用户的多个标签用分号连起来),不能用于数值合并
  • 别用 AVG() 替代 SUM():平均值会掩盖总量变化,比如两个订单各 5 件,AVG 是 5,SUM 是 10 —— 后者才是真实吞吐量

临时表只是手段,不是目的

临时表适合两种情况:一是原始数据需清洗后再合并(比如先 WHERE status = 'valid' 过滤);二是后续还要多次引用合并结果。否则纯属增加 I/O 和维护成本。

  • 能一步到位,就别拆成两步:INSERT INTO #merged SELECT id, SUM(num) FROM #tmp1 GROUP BY id 再查 #merged,不如直接 SELECT id, SUM(num) FROM #tmp1 GROUP BY id
  • 临时表命名要带上下文,比如 #sales_daily_merged 比 #tmp 更易排查
  • SQL Server 中临时表作用域限于当前会话,断开连接即销毁;MySQL 的 CREATE TEMPORARY TABLE 同理 —— 别指望跨查询复用而不显式重建

真正容易被忽略的是:合并前是否已确认重复行的业务合理性?比如同一订单出现两次,是系统 bug 还是正常重试?盲目 GROUP BY 可能把问题掩盖掉。先查 HAVING COUNT(*) > 1 定位异常模式,再决定合并策略。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

4103

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

871

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1069

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

5981

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2883

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

5960

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

7961

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1090

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

952

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习