SQL中如何使用窗口函数进行数据标准化处理_MAX与MIN应用

秋涛酱_3259

秋涛酱_3259

2026-05-09

275人浏览

原创

窗口函数配合MAX()和MIN()可高效实现Min-Max标准化,避免子查询导致的多次全表扫描、WHERE不一致、多列分组归一化困难等问题,且天然保留行结构;关键写法为SELECT ..., (col - MIN(col) OVER()) / NULLIF(MAX(col) OVER() - MIN(col) OVER(), 0) FROM tbl。

sql中如何使用窗口函数进行数据标准化处理_max与min应用

窗口函数配合 MAX() 和 MIN() 是做列内标准化(如 Min-Max 归一化)最直接、最高效的方式,无需子查询或自连接,且能保留原始行结构。

为什么不能直接用子查询做 Min-Max 标准化

有人尝试先用子查询算出整列极值,再 JOIN 回原表做除法:SELECT price, (price - (SELECT MIN(price) FROM products)) / ((SELECT MAX(price) FROM products) - (SELECT MIN(price) FROM products)) AS norm_price FROM products。这看似可行,但问题明显:

  • 三次全表扫描 —— MIN()、MAX() 各扫一次,主表再扫一次,I/O 开销翻倍
  • 若表有 WHERE 条件(如 WHERE category = 'Electronics'),子查询却没同步过滤,结果错得离谱
  • 无法在同一个查询中同时对多列做不同范围的归一化(比如 price 按全局归一,quantity 按 category 分组归一)

用 MAX() OVER() 和 MIN() OVER() 一步到位

窗口函数天然支持“不压缩行数 + 全局/分组极值广播”,正好匹配标准化需求。关键写法是:

SELECT
  id,
  price,
  (price - MIN(price) OVER()) / NULLIF(MAX(price) OVER() - MIN(price) OVER(), 0) AS price_norm
FROM products;

说明与要点:

  • OVER() 不带参数 = 整个结果集为一个窗口,MIN(price) OVER() 就是全局最小值,自动广播到每一行
  • NULLIF(..., 0) 必须加 —— 否则当所有 price 值相等时,分母为 0,触发 division by zero 错误
  • 若需按分组归一化(如每类商品独立缩放到 [0,1]),把 OVER() 改成 OVER(PARTITION BY category)
  • MySQL 8.0+、PostgreSQL、SQL Server、Oracle 都支持;SQLite 3.25+ 也支持,但旧版 MySQL(5.7 及之前)完全不支持,别硬套

处理 NULL 和边界值的陷阱

MIN() 和 MAX() 窗口函数仍遵循聚合函数规则:自动跳过 NULL。但这在标准化中容易埋雷:

  • 如果某行 price 是 NULL,归一化结果仍是 NULL —— 这没问题,但你要确认业务是否允许缺失值参与计算
  • 更危险的是:若整列 price 全为 NULL,MIN() OVER() 和 MAX() OVER() 都返回 NULL,导致分子分母全 NULL,整个表达式结果为 NULL,而非报错;你可能误以为计算成功,实际没数据
  • 想强制补默认值?可用 COALESCE(MIN(price) OVER(), 0),但注意:补 0 会扭曲真实范围,仅适用于明确知道缺失即为零的场景(如库存字段)

性能与索引的实际影响

窗口版 Min-Max 标准化在有索引时并不自动提速 —— 因为 OVER() 默认要看到全部行,优化器通常走全表扫描。但有两个例外可提速:

  • 如果加了 WHERE 过滤(如 WHERE status = 'active'),且该字段上有索引,数据库会先过滤再开窗,实际只扫描有效行
  • 某些引擎(如 PostgreSQL)对 ORDER BY + ROWS BETWEEN UNBOUNDED PRECEDING AND UNBOUNDED FOLLOWING 的写法能利用排序索引,但纯 OVER() 不保证
  • 真正影响性能的其实是后续操作:如果归一化后立刻 ORDER BY price_norm 或 WHERE price_norm > 0.9,而没对原始 price 建索引,就可能慢——归一化本身不产生新索引

复杂点在于:归一化结果不可索引,必须靠原始列索引支撑;而 NULLIF 和 COALESCE 这类包装会让优化器放弃索引下推,这点极易被忽略。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

4603

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

951

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1209

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

6581

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

3343

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

6560

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

9021

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1230

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1072

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习