SQL中如何计算每组数据的标准差

P粉602998670

P粉602998670

2026-08-03

634人浏览

原创

绝大多数业务场景应使用stddev_samp(),因其基于样本且分母减1;stddev_pop()仅适用于全量总体数据,跨库需注意mysql 5.7前stddev默认为pop、postgresql/sql server默认为samp。

sql中如何计算每组数据的标准差

STDDEV_SAMP 和 STDDEV_POP 到底该用哪个

绝大多数业务场景下,你手头的数据只是总体的一个样本(比如某月订单、某部门员工、某批次日志),不是全量数据。这时必须用 STDDEV_SAMP() —— 它分母是 COUNT(*) - 1,做了贝塞尔校正;而 STDDEV_POP() 分母是 COUNT(*),只适用于你 100% 确认数据就是全体、无抽样偏差的情况。

容易踩的坑:

  • 在 PostgreSQL 或 SQL Server 里写 STDDEV(x),默认就是 STDDEV_SAMP(x);但在 MySQL 5.7 及以前,STDDEV(x) 实际等价于 STDDEV_POP(x),语义相反
  • 组内只有 1 条记录时,STDDEV_SAMP() 返回 NULL(数学上无法计算),而 STDDEV_POP() 返回 0 —— 看似“没波动”,实则掩盖了数据稀疏问题
  • 跨库迁移 SQL 时,别直接复制函数名,先查目标库文档确认默认行为

GROUP BY 后直接聚合 vs 窗口函数 OVER(PARTITION BY)

想按部门看薪资标准差,且结果只要一行/部门:用 GROUP BY + 聚合函数;想保留原始行数、每行都带本部门的标准差(比如后续还要算“该员工薪资离部门均值几个标准差”):必须用窗口函数。

常见错误现象:

  • SELECT dept, salary, STDDEV_SAMP(salary) OVER (PARTITION BY dept) FROM emp; 在 MySQL 8.0+、PostgreSQL 9.4+、Oracle、BigQuery 中可用;在 MySQL 5.7 或 SQLite 中会报错或不识别
  • 写了 OVER (PARTITION BY dept ORDER BY hire_date) 却没加 ROWS BETWEEN,数据库默认按“从第一行到当前行”累积计算,结果每行标准差都不同,失去分组意义
  • 要静态分组标准差,只写 PARTITION BY dept,删掉 ORDER BY

MySQL 5.7 或不支持窗口函数的库怎么硬刚

没有 OVER 就只能用子查询或 JOIN 模拟:先算各组均值,再回连原表算偏差平方,最后聚合求平均再开方。

PaperFake
PaperFake

AI写论文

下载

示例(按 region 算样本标准差):

SELECT region,
       SQRT(SUM((amount - avg_amount) * (amount - avg_amount)) / (COUNT(*) - 1)) AS stddev_samp
FROM sales
JOIN (SELECT region, AVG(amount) AS avg_amount FROM sales GROUP BY region) t USING (region)
GROUP BY region
HAVING COUNT(*) > 1;

注意点:

  • USING (region) 要求主表和子查询都有 region 字段,漏写子查询里的 GROUP BY region 会出错
  • 必须加 HAVING COUNT(*) > 1,否则除零崩溃
  • 如果 amountNULLAVG() 自动跳过,但 (amount - avg_amount)NULL 整行变 NULL,最终结果为 NULL;需提前 WHERE amount IS NOT NULL

标准差结果为 NULL 或 0 的真实原因

STDDEV_SAMP() 返回 NULL,大概率是组内有效数值少于 2 个;STDDEV_POP() 返回 0,说明组内所有非空值完全相等(或只剩一个值)。但这两种情况业务含义完全不同。

建议做法:

  • HAVING COUNT(*) >= 5 过滤掉小样本组,避免统计失真
  • 同时输出 COUNT(*)STDDEV_SAMP(),人工判断是否因数据量不足导致不可信
  • 不要单独依赖标准差数值做告警,配合均值、极差(MAX() - MIN())一起看

最常被忽略的一点:标准差本身对异常值极度敏感。一组数据里混入一个离群高薪,就能把 STDDEV_SAMP() 拉高好几倍——它反映的是“整体离散程度”,不是“典型波动范围”。真要稳健评估,得考虑中位数绝对偏差(MAD)或分位数间距(IQR),但那已是另一套 SQL 写法了。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

2451

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

449

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

614

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

3969

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

1345

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

3561

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

3513

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

642

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

526

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.4万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 131.8万人学习