SQL SELECT多表查询为什么会产生重复数据?

浅伟酱_9615

浅伟酱_9615

2026-08-09

361人浏览

原创

join后结果行数比左表多是正常行为,因右表对同一连接键存在多条记录时会复制左表对应行;需通过预聚合、窗口函数或exists等控制右表粒度,而非依赖distinct事后去重。

sql select多表查询为什么会产生重复数据?

为什么JOIN后结果行数比左表多?

这是JOIN的正常行为,不是SQL出错。只要右表对同一个连接键(比如user_id)有多条记录,左表那行就会被复制多次——数据库严格按语义执行,不是bug,但后续统计或导出时容易误算。

常见现象:users表100行,t_log表里某个user_id出现7次,JOIN后这条用户就占7行。用COUNT(*)查JOIN结果,再对比左表原始行数,能快速确认膨胀倍数。

  • 执行SELECT u.id, COUNT(*) OVER (PARTITION BY u.id)看每条用户被展开几次,>1就说明右表存在一对多
  • 别只信COUNT(*),加LIMIT 10并SELECT *看原始连接结果更可靠
  • 后续再JOIN第三张表时,拿这个已膨胀的结果当主表,错误会级联放大

为什么加了DISTINCT还是有重复?

DISTINCT去重的是整行,不是单列。只要任意一列值不同(比如log_time、ip_addr、order_no),就算“不重复”。它解决不了逻辑膨胀,只是事后擦除,还可能掩盖真实问题。

例如:SELECT DISTINCT u.id, u.name FROM users u LEFT JOIN t_log l ON u.id = l.user_id看似去重,但一旦加上l.log_time,重复立刻回来;在某些引擎中DISTINCT还会触发隐式排序,大表查询明显变慢。

  • DISTINCT必须紧贴SELECT,不能写成SELECT DISTINCT a.* FROM (...(多数旧版本报错)
  • 只对明确需要去重的列用DISTINCT,比如SELECT DISTINCT user_id, name,而非DISTINCT *
  • DISTINCT可能把本该区分的合法组合也合并——同一用户在不同渠道下的两笔相同金额订单,DISTINCT *会当成重复删掉

怎么让右表只输出你需要的那一行?

核心是控制右表的输出粒度,而不是在结果上“打补丁”。选哪种方式,取决于你要什么:

  • 要汇总值(如登录次数、最新IP):用子查询+GROUP BY预聚合
    SELECT u.id, u.name, p.cnt, p.max_ip FROM users u LEFT JOIN (SELECT user_id, COUNT(*) AS cnt, MAX(ip_addr) AS max_ip FROM t_log GROUP BY user_id) p ON p.user_id = u.id
  • 要完整单条明细(如最新一条日志):用ROW_NUMBER()窗口函数,且rn = 1必须写在ON条件里
    ON p.user_id = u.id AND p.rn = 1——写在WHERE会丢掉没日志的用户
  • 只判断“有没有关联记录”:改用EXISTS,逻辑清晰、无重复、性能更好
    SELECT * FROM users u WHERE EXISTS (SELECT 1 FROM t_log l WHERE l.user_id = u.id)

LEFT JOIN + IS NULL为什么会漏数据或误匹配?

想查“没关联到子表的主表记录”,常写LEFT JOIN ... WHERE sub.id IS NULL。但如果子表有多条匹配记录,LEFT JOIN仍会产生多行,再用WHERE过滤时逻辑没问题,但容易忽略:若子表本就允许空值或存在重复键,IS NULL可能匹配出意料之外的行。

  • 确保子表关联字段有唯一约束(如payment.order_id应为外键+唯一索引),否则LEFT JOIN天然导致主表膨胀
  • 避免在ON条件里写AND sub.status = 'success'后又用WHERE sub.id IS NULL——这会把status不是success的也当“缺失”,应改用子查询或CASE WHEN
  • WHERE条件写在JOIN后却过滤右表字段(如WHERE l.status = 'active'),会把LEFT JOIN变成事实上的INNER JOIN;应改到ON子句:LEFT JOIN t_log l ON u.id = l.user_id AND l.status = 'active'

真正容易被忽略的一点:JOIN后的结果集,已经不是原始左表的行集合了。哪怕你只SELECT左表字段,中间生成的临时结果也已被右表“撑开”——一旦把它当唯一实体继续操作,错误就埋下了。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

3903

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

831

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1009

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

5741

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

2683

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

5720

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

7541

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1030

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

892

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习