如何通过SQL子查询进行数据校验_完整性检查方案

胖涛吖_6275

胖涛吖_6275

2026-04-07

1017人浏览

原创

用 NOT EXISTS 查缺失关联记录最稳,因它天然短路、不惧 NULL;GROUP BY + HAVING 校验聚合一致性;EXCEPT/MINUS 比对快照差异;子查询须精简字段并加索引。

如何通过sql子查询进行数据校验_完整性检查方案

用 NOT EXISTS 查缺失的关联记录最稳

外键约束没建或被绕过时,主表有数据、从表却没对应记录,这种“孤儿数据”靠子查询最容易揪出来。NOT EXISTS 比 LEFT JOIN ... IS NULL 更直观,执行计划也更可控——它天然短路,一找到匹配就停,不扫全表。

常见错误是写成 NOT IN:只要从表关联字段含 NULL,整条结果就变空,校验直接失效。

  • 正确写法:
    SELECT id FROM orders WHERE NOT EXISTS (SELECT 1 FROM customers WHERE customers.id = orders.customer_id)
  • 别用 NOT IN (SELECT customer_id FROM customers),customers.customer_id 有 NULL 就漏检
  • 确保子查询里 WHERE 条件列有索引,否则大表上会慢到卡住

用 GROUP BY + HAVING 校验聚合逻辑一致性

业务规则常要求“每个订单的明细行总金额必须等于订单头金额”,这类跨层级数值一致性没法靠外键,得靠分组后筛异常组。

关键在 HAVING 里直接写校验表达式,别先算出中间值再 WHERE,否则聚合前过滤会丢数据。

  • 示例(查金额对不上的订单):
    SELECT order_id, SUM(item_amount) AS detail_sum, header_amount FROM orders o JOIN order_items oi ON o.id = oi.order_id GROUP BY order_id, header_amount HAVING SUM(item_amount) != header_amount
  • header_amount 必须进 GROUP BY,否则 MySQL 8.0+ 会报错,其他数据库也可能非确定性返回
  • 如果 item_amount 允许为 NULL,SUM() 会跳过它,但你可能需要 SUM(COALESCE(item_amount, 0)) 显式处理

用 EXCEPT(或 MINUS)比对两个快照是否一致

上线前验证迁移脚本、定时任务跑完后核对源库和目标库,用集合差集最干净——有差异就出来,没差异就空结果集。

注意不同数据库关键字不同:EXCEPT 是 PostgreSQL / SQL Server / SQLite 的写法,Oracle 用 MINUS,MySQL 8.0+ 才支持 EXCEPT,旧版得用 LEFT JOIN 模拟。

  • 标准写法(PostgreSQL):
    SELECT id, name, status FROM users_production EXCEPT SELECT id, name, status FROM users_staging
  • 字段顺序、类型、数量必须完全一致,否则报错;字符串比较区分大小写,需提前 UPPER() 统一
  • 大数据量时加 LIMIT 10 快速确认有无差异,别直接跑全量

子查询校验的性能雷区:别让 SELECT * 拖垮整个检查

校验逻辑本身不复杂,但子查询里随手写 SELECT * 或没加 LIMIT,在千万级表上可能跑十几分钟,还锁表。

核心原则:子查询只取校验必需的字段,主查询也只选定位用的 ID 或关键标识。

  • 错例:
    SELECT * FROM products WHERE id IN (SELECT * FROM invalid_skus)
    —— 子查询返回 5 列,实际只用第一列
  • 正例:
    SELECT id FROM products WHERE id IN (SELECT sku_id FROM invalid_skus)
  • 如果只是检查“是否存在”,用 EXISTS 比 IN 更轻量,它不关心子查询返回什么,只看有没有行

校验逻辑越贴近业务规则本身,就越难绕过;但每多一层嵌套、每多一个未索引字段,就多一分超时风险。真正卡住人的,往往不是语法,而是没想清楚“我到底要证明什么”和“这张表此刻能不能扛住这个查”。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

4823

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

991

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1269

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

6841

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

3543

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

6820

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

9481

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1290

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1132

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习