pearson相关分析(三分钟掌握皮尔逊相关分析,洞悉变量关系)

变量类型与推荐的假设检验方法
可以看到,当我们探索两个连续变量之间的关系时,相关分析是一个很好的选择。那么,相关分析的原理是什么?如何在Python中实现相关分析呢?
一、Pearson相关系数
针对两个独立的服从正态分布的连续变量,我们常用Pearson相关系数来衡量它们之间的相关性。Pearson相关系数的值域为[-1, 1],当相关系数小于0时,表明两变量之间存在线性负相关关系;当相关系数大于0时,表明两变量之间存在线性正相关关系;当相关系数等于0时,表明两变量之间无明显的相关关系。
当变量不符合正态分布或者是顺序型变量时,我们常用Spearman相关系数来衡量变量间的关系;当我们需要探索变量间的非线性关系时,可以使用Kendall相关系数。不过这些不在本篇的讨论范围内,如果感兴趣的人多,可以在下方留言。
一般情况下,我们用r来表示相关系数,r的取值与相关程度之间的关系如下:

皮尔逊相关系数的计算很简单。假设我们有两组数据,一组为x,一组为y。那么x与y之间的协方差作为分子,x的标准差与y的标准差之间的乘积作为分母,得到的就是x与y之间的相关系数r,我们用公式表示如下:

计算出相关系数r之后,我们还要检验它是否具有统计学意义,即我们常说的是否显著。这里我们检验的计算公式为:

然后我们从t分布中找到对应的P值,与我们设定的显著性水平做一下对比,比如说我们设定了显著性水平为0.05,当P值小于0.05时,我们就拒绝零假设,认定x与y之间存在显著的线性相关。需要注意的是,P值大小不代表两个变量间相关性的强弱,r的大小才是衡量相关性的统计量。
当然,现在这些繁琐的过程我们可以统统交给计算机来处理。
二、Python相关分析
在pandas中,计算相关系数非常简单:

我们还可以用热力图来更直观地感受一下:
sns.heatmap(iris.corr(), cmap='bwr', center=0)

除了sepal_width变量与其他变量负相关以外,其他三个变量间都高度正相关。
但是我们注意到,这里并没有显著性检验的信息,那么我们如何得到这些信息呢?答案就是使用Scipy,Scipy是Python中一个非常强大的科学计算库,提供了很多关于统计、科学计算的方法。
scipy.stats.pearsonr方法会根据输入的两组数据,计算Pearson相关性,返回相关系数r以及显著性检验的P值,当P值低于我们设定的显著性水平时,即可认为变量间显著相关。
from scipy.stats import pearsonr pearsonr(iris.sepal_length, iris.petal_length)
输出为:
(0.8717537758865832, 1.0386674194497583e-47)

好了,关于Pearson相关的分享就到这里,有任何问题可以在下方留言,我会及时回答。另外,除了计算相关系数,散点图、回归图等都很适合用来探索变量间的关系,感兴趣的可以去看我的历史文章中关于数据可视化的几个系列。
相关文章
-
全球首例机器人自主搭地铁送货!深圳地铁与万科合作物流新服务
全球首例由机器人自主搭乘地铁配送货,在深圳地铁里变成现实。7月14日,在深圳地铁2号线湾厦站,机器人利用地铁的空闲时间段,通过AI调度算法+机器人技术实现无人化配送的首次测试。据悉,这是深铁集团与万科合作运营的“轨道交通+机器人配送”场景,该机器人与智能调度系统由万科旗下万纬物流集成研发。北极燕鸥卡
2025-07-15 00:05:00 -
刚刚,昭通永善发生地震!
【来源:掌上春城】速报参数:据中国地震台网正式测定,7月14日22时28分在云南昭通市永善县发生3.0级地震,震源深度10公里,震中位于北纬28.05度,东经103.43度。震中地形:震中5公里范围内平均海拔约1001米。历史地震:根据中国地震台网速报目录,震中周边200公里内近5年来发生3级以上地
2025-07-14 23:33:00 -
那艺娜厦门演唱会有粉丝被热晕倒?观众在现场高喊“开空调”,文旅局:系低血糖
极目新闻记者 余渊实习生 唐悦 李琳7月14日,有网友发布视频称,那艺娜厦门演唱会现场,由于场地内不开空调,导致一名观众现场被热晕,被人搀扶出去。网友发布的现场视频显示,演唱会场馆内人员密集,发现有人身体不适后,那艺娜在台上招呼工作人员,观众也有秩序地让出了一条通道。事件过后,演唱会现场观众齐喊“开
2025-07-14 20:14:00 -
赴一场园林与诗歌的夏日之约,沪上诗歌爱好者齐聚醉白池共品荷韵
小憩桐阴坐曲廊,一规镜槛绿泱泱。7月12日,“雅韵醉白——2025诗意园林系列活动”之艺术家现场创作采风活动在上海醉白池公园举办,诗歌爱好者们齐聚一堂,共赴这场园林与诗歌的夏日之约。活动在醉白讲堂内展开,上海醉白池公园副主任鲁翠莲对各位嘉宾的到来表示热烈欢迎,介绍了本次活动的背景及意义。华亭诗社社长
2025-07-14 19:36:00 -
出现“青黄不接”,影响“全球部署”,美国航母将陷“危险空窗期”?
【环球时报特约记者 武彦】近年美国海军的全球部署计划显得日益捉襟见肘,这与美国航母的窘迫现状脱不了关系。据美国《国家利益》杂志网站12日报道,随着新一代“肯尼迪”号超级航母的服役时间再次推迟,美国航母的数量将在未来一段时间降低到10艘。五角大楼的最新报告显示,类似情况未来可能会越来越常见。接受《环球
2025-07-14 17:21:00 -
青花汾酒入驻克里姆林宫 国酒对话共谱文化新篇章
7月9日,由山西杏花村汾酒集团有限责任公司主办、山西日报传媒(集团)有限责任公司承办的“2025青花汾酒茶道酒香”品牌活动在俄罗斯首都莫斯科圆满落幕。活动期间,“中国汾酒与俄罗斯伏特加 国酒对话”论坛、克里姆林宫博物馆青花汾酒收藏仪式等项目的开展,为中俄传统文化交流、中俄酒类酿造技艺共鉴、酒类品牌国
2025-07-14 15:57:00