怎样在PostgreSQL中使用CORR与COVAR进行SQL统计分析?

夏墨小哥_1991

夏墨小哥_1991

2026-09-05

769人浏览

原创

postgresql中corr函数要求输入为double precision类型,不接受整型直接输入,否则可能因隐式转换失败或大整数乘法溢出导致精度偏差;必须显式转换如sales_cnt::double precision,且corr基于covar_pop(总体协方差)计算,非样本版本。

怎样在postgresql中使用corr与covar进行sql统计分析?

PostgreSQL中CORR函数必须传double precision类型

CORR(expr1, expr2)在PostgreSQL里不接受整型直接输入,否则可能因隐式转换失败或大整数乘法溢出导致精度偏差。例如对两个INT列直接调用CORR(sales_cnt, profit),引擎会尝试转成DOUBLE PRECISION,但若原始值过大(如超2⁵³),乘积项会丢失低位精度。

稳妥做法是显式转换:

  • 用sales_cnt::DOUBLE PRECISION或CAST(sales_cnt AS DOUBLE PRECISION)
  • 若列本身是NUMERIC,也建议先转DOUBLE PRECISION再进CORR,避免NUMERIC高精度运算拖慢聚合速度
  • 别依赖自动转换——PostgreSQL不会为CORR特设宽松类型策略,报错ERROR: function corr(numeric, numeric) does not exist很常见

COVAR_POP和COVAR_SAMP的区别直接影响CORR结果解释

CORR底层调用的是COVAR_POP除以两个STDDEV_POP的乘积,不是COVAR_SAMP。这意味着它默认按「总体」而非「样本」建模:分母用n而非n−1。

实际影响在于小数据集:

  • 当有效行数n 时,<code>COVAR_POP比COVAR_SAMP略小(因分母更大),导致CORR绝对值轻微压低
  • 若你后续要对接统计软件(如R的cor()默认用method="pearson",即样本版本),需注意这个差异不是bug,而是定义不同
  • 无法通过参数切换——PostgreSQL没提供CORR_SAMP这类变体,硬要样本版相关系数得手动写:COVAR_SAMP(x,y) / (STDDEV_SAMP(x) * STDDEV_SAMP(y))

CORR不能嵌套在GROUP BY外层聚合中

写SELECT region, CORR(sales, cost) FROM t GROUP BY region合法;但写SELECT CORR(SUM(sales), SUM(cost)) FROM t GROUP BY region会报ERROR: aggregate function calls cannot be nested。

根本原因在于CORR不是“对聚合结果算相关”,而是“对成对原始观测值计算协方差关系”。一旦先SUM,就只剩单个标量,没了(xᵢ,yᵢ)序列。

正确路径只有两条:

  • 用子查询先生成指标对宽表:SELECT CORR(avg_sales, avg_cost) FROM (SELECT region, AVG(sales) AS avg_sales, AVG(cost) AS avg_cost FROM t GROUP BY region) _
  • 用窗口函数做分组内相关性:CORR(sales, cost) OVER (PARTITION BY region)——此时每行返回的是该region所有行的CORR值,不是逐行相关系数
  • 注意NULL处理逻辑:任意一列值为NULL的行,整行被排除,不插值、不补0

窗口模式下CORR的OVER子句容易漏掉ORDER BY语义

CORR(x,y) OVER (PARTITION BY category ORDER BY date)看似合理,但PostgreSQL要求ORDER BY存在时,CORR会变成累积相关系数(cumulative),即从第一行到当前行的滑动窗口计算,不是整个分区的固定值。

这常导致误读:

  • 第1行:只有一对(x₁,y₁) → CORR为NULL(至少需2点)
  • 第5行:算的是前5行的CORR,不是全分区
  • 若你本意是“每个category内按date排序后整体相关性”,就不该加ORDER BY,只留PARTITION BY category
  • 检查执行计划时,留意WindowAgg节点是否带frame_clause——有则为累积,无则为分区全量

真正难的不是写对语法,是想清楚你要的到底是「分组内静态相关强度」,还是「随时间演化的动态关联趋势」。前者用聚合模式,后者才用带ORDER BY的窗口,且得接受它是累积值。多数业务场景其实只需要前者。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

4363

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

911

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1149

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

6301

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

3123

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

6260

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

8501

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1150

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1012

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.8万人学习