相关性分析:Pearson、Kendall、Spearman

本文详细介绍了统计学中的相关性分析方法,包括Pearson、Kendall和Spearman相关系数。讨论了它们的定义、数学特性、适用范围、Python实现以及它们之间的关系。Pearson相关系数适用于线性关系,Kendall秩相关系数和Spearman等级相关系数则对非线性关系有一定容忍度。文中还展示了如何使用Python的pandas和scipy库进行相关性检测实战。

在分析特征间相关性时,常使用的方法是pandas.DataFrame.corr

DataFrame.corr(self, method=’pearson’, min_periods=1)

其中包含的方法主要为:

  • pearson:Pearson相关系数
  • kendall:Kendall秩相关系数
  • Spearman:Spearman等级相关系数

目录

Pearson相关系数

在统计学中,皮尔逊相关系数相关系数(英语:Pearson product-moment correlation coefficient,又称作 PPMCC或PCCs, 用r表示)用于度量两个变量X和Y之间的相关(线性相关),其值介于-1与1之间。-1表示完全的负相关(这个变量下降,那个就会上升),+1表示完全的正相关,0表示没有线性相关。通常情况下通过以下相关系数取值范围判断变量的相关强度:

  • 0.8-1.0 极强相关
  • 0.6-0.8 强相关
  • 0.4-0.6 中等程度相关
  • 0.2-0.4 弱相关
  • 0.0-0.2 极弱相关或无相关

该相关系数是判断两组数据与某一直线拟合程度的一种度量,对应的公式比欧几里得距离计算公式要复杂,但是他在数据不是很规范(normalized)的时候,会倾向于给出更好的结果。

皮尔逊相关系数的定义

两个变量之间的皮尔逊相关系数定义为两个变量之间的协方差和标准差的商:

 

ρX,Y=cov(X,Y)σXσY=E[(X−μX)(Y−μY)]σXσY

协方差是一个反映两个随

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值