百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

数据分析-相关性分析(相关性数据分析步骤)

haoteby 2025-04-09 16:14 15 浏览

相关性分析是一种统计方法,用于衡量两个或多个变量之间的关系强度和方向。它通过计算相关系数来量化变量间的线性关系,从而帮助理解变量之间的相互影响。相关性分析常用于数据探索和假设检验,是数据分析和统计建模中的重要工具。

相关性分析的主要内容是计算变量之间的相关系数,主要的相关系数有如下三个:

皮尔逊相关系数(Pearson Correlation Coefficient):用于衡量两个连续变量之间的线性关系,值介于-1和1之间。值越接近1或-1,表示变量之间的线性关系越强;值接近0,表示几乎没有线性关系。

斯皮尔曼秩相关系数(Spearman's Rank Correlation Coefficient):用于衡量两个变量之间的单调关系,即使这种关系不是线性的。常用于处理不满足正态分布或包含异常值的数据。

肯德尔等级相关系数(Kendall's Tau):用于衡量两个变量之间的相关性,适合处理小样本数据或数据中存在相同值的情况。

至于如何选择合适的相关系数,可以通过下面这张流程图来进行判断↓

整体流程是,在做相关性分析前,先通过绘制散点图来直观感受一下数据是否有相关性,如果有相关性,再进行后续的操作,没有相关性就可以停止了。

第二步是看数据的类型,如果是连续变量,且样本量大于30;或者联系变量,样本量小于30,但符合正太分布。就选择皮尔逊相关系数,否则就选择另外两种的一个。

【如何判断相关程度】

主要有两大步骤,一是计算相关系数,相关系数的结果会在-1到1之间,如果0≤∣r∣<0.3,就认为两个变量之间不相关;如果0.3≤∣r∣<0.5,就认为两个变量之间存在弱相关;如果0.5≤∣r∣<0.8,就认为两个变量之间存在中度相关;如果0.8≤∣r∣<1就认为两个变量之间存在强相关关系。

上面的相关系数值是基于已有的样本值计算得到的,不能代表整体也是一样的相关性。所以第二步还需要做假设检验,只有通过了假设检验,才能认为我们前面计算出来的相关系数可以代表整体的相关系数。

【案例演示】

我们以工作中常见的广告/推广费用的投入与销售额之间的关系举例,正常情况下推广费用越多,对应的销售额应该就越大。于是我们抽取了25天的数据样本,来进行相关性分析,数据如下↓

因为是连续变量,但是样本数只有25,小于30个,所以我们需要对两个字段进行正态性检验,详细的可以参考《方差分析》里面的R和Python正态性检验,代码和结果如下↓

# 正态性检验
shapiro.test(data$advertising)
shapiro.test(data$sales)
Shapiro-Wilk normality test
data:  data$advertising
W = 0.96745, p-value = 0.5812


Shapiro-Wilk normality test
data:  data$sales
W = 0.96917, p-value = 0.624

结果都远大于0.05,符合正太分布。接下来就直接计算皮尔逊相关系数,代码和结果如下↓

correlation <- cor(data$advertising, data$sales)
correlation
[1] 0.9430218

结果是0.94,说明推广费用投入和销售额之间有非常强的正相关关系。为了对结果进行假设检验,我们需要对回归模型的参数进行统计检验,通常使用t检验来检验每个参数是否显著。

最后计算出来的p-value: 1.769e-12,通过检验。我们可以绘制图形来看在95%的置信区间下的相关走势图↓

plot <- ggplot(data, aes(x = advertising, y = sales)) +
  geom_point() +
  geom_smooth(method = "lm", se = TRUE, color = "blue", fill = "lightblue", level = 0.95) +
  labs(title = paste("广告支出与销售额的关系\n皮尔逊相关系数:", round(correlation, 2)),
       x = "广告支出",
       y = "销售额") +
  theme_minimal()

【斯皮尔曼秩相关系数】

最后再举一个斯皮尔曼秩相关系数的案例,是员工工作年限和他们工作满意度的评分,假设评分分数是1-10分之间,数据如下↓

n <- 25
work_years <- runif(n, min = 1, max = 30)  
satisfaction <- 10 - 0.2 * work_years + rnorm(n, mean = 0, sd = 1.5)  
satisfaction <- ifelse(satisfaction < 1, 1, satisfaction)
satisfaction <- ifelsesatisfaction> 10, 10, satisfaction)
data <- data.frame(work_years, satisfaction)

然后直接进行分析,代码和结果如下↓

# 斯皮尔曼秩相关系数
spearman_correlation <- cor(data$work_years, data$satisfaction, method = "spearman")
> spearman_correlation
[1] -0.7569231


结果是-0.756,说明工作时间越长,对工作的满意度就越低。这个结果我们还不能直接拿来使用,还需要做假设检验↓

# 相关性显著性检验
spearman_test <- cor.test(data$work_years, data$satisfaction, method = "spearman")
data:  data$work_years and data$satisfaction
S = 4568, p-value = 1.975e-05
alternative hypothesis: true rho is not equal to 0
sample estimates:
       rho 
-0.7569231


结果也很完美,通过了检验。最后我们来绘制一下相关的图像↓

plot <- ggplot(data, aes(x = work_years, y = satisfaction)) +
  geom_point() +
  geom_smooth(method = "loess", se = TRUE, color = "blue", fill = "lightblue") +
  labs(title = paste("员工工作年限与工作满意度的关系\n斯皮尔曼秩相关系数:", round(spearman_correlation, 2)),
       x = "工作年限 (年)",
       y = "工作满意度评分") +
  theme_minimal()

链接是我使用PowerBI整合的历史文章,按类型分类,可以根据需求查询:Microsoft Power BI↓

https://app.powerbi.com/view?r=eyJrIjoiNjI2NWQ3NjktYjU0ZC00ZWZhLTgzMDgtMGI4ZTk1ZDlkODM3IiwidCI6IjI3NDQ3MWQ0LTM4ZDQtNDVlZS1hMmJkLWU1NTVhOTBkYzM4NiJ9

End

相关推荐

一日一技:用Python程序将十进制转换为二进制

用Python程序将十进制转换为二进制通过将数字连续除以2并以相反顺序打印其余部分,将十进制数转换为二进制。在下面的程序中,我们将学习使用递归函数将十进制数转换为二进制数,代码如下:...

十进制转化成二进制你会吗?#数学思维

六年级奥赛起跑线:抽屉原理揭秘。同学们好,我是你们的奥耀老师。今天一起来学习奥赛起跑线第三讲二进制计数法。例一:把十进制五十三化成二进制数是多少?首先十进制就是满十进一,二进制就是满二进一。二进制每个...

二进制、十进制、八进制和十六进制,它们之间是如何转换的?

在学习进制时总会遇到多种进制转换的时候,学会它们之间的转换方法也是必须的,这里分享一下几种进制之间转换的方法,也分享两个好用的转换工具,使用它们能够大幅度的提升你的办公和学习效率,感兴趣的小伙伴记得点...

c语言-2进制转10进制_c语言 二进制转十进制

#include<stdio.h>intmain(){charch;inta=0;...

二进制、八进制、十进制和十六进制数制转换

一、数制1、什么是数制数制是计数进位的简称。也就是由低位向高位进位计数的方法。2、常用数制计算机中常用的数制有二进制、八进制、十进制和十六进制。...

二进制、十进制、八进制、十六进制间的相互转换函数

二进制、十进制、八进制、十六进制间的相互转换函数1、输入任意一个十进制的整数,将其分别转换为二进制、八进制、十六进制。2、程序代码如下:#include<iostream>usingna...

二进制、八进制、十进制和十六进制等常用数制及其相互转换

从大学开始系统的接触计算机专业,到现在已经过去十几年了,今天整理一下基础的进制转换,希望给还在上高中的表妹一个入门的引导,早日熟悉这个行业。一、二进制、八进制、十进制和十六进制是如何定义的?二进制是B...

二进制如何转换成十进制?_二进制如何转换成十进制例子图解

随着社会的发展,电器维修由继电器时代逐渐被PLC,变频器,触摸屏等工控时代所替代,特别是plc编程,其数据逻辑往往涉及到数制二进制,那么二进制到底是什么呢?它和十进制又有什么区别和联系呢?下面和朋友们...

二进制与十进制的相互转换_二进制和十进制之间转换

很多同学在刚开始接触计算机语言的时候,都会了解计算机的世界里面大多都是二进制来表达现实世界的任何事物的。当然现实世界的事务有很多很多,就拿最简单的数字,我们经常看到的数字大多都是十进制的形式,例如:我...

十进制如何转换为二进制,二进制如何转换为十进制

用十进制除以2,除的断的,商用0表示;除不断的,商用1表示余0时结束假如十进制用X表示,用十进制除以2,即x/2除以2后为整数的(除的断的),商用0表示;除以2除不断的,商用1表示除完后的商0或1...

十进制数如何转换为二进制数_十进制数如何转换为二进制数举例说明

我们经常听到十进制数和二进制数,电脑中也经常使用二进制数来进行计算,但是很多人却不清楚十进制数和二进制数是怎样进行转换的,下面就来看看,十进制数转换为二进制数的方法。正整数转二进制...

二进制转化为十进制,你会做吗?一起来试试吧

今天孩子问把二进制表示的110101改写成十进制数怎么做呀?,“二进制”简单来说就是“满二进一”,只用0和1共两个数字表示,同理我们平常接触到的“十进制”是“满十进一”,只用0-9共十个数字表示。如果...

Mac终于能正常打游戏了!苹果正逐渐淘汰Rosetta转译

Mac玩家苦转译久矣!WWDC2025苹果正式宣判Rosetta死刑,原生游戏时代终于杀到。Metal4光追和AI插帧技术直接掀桌,连Steam都连夜扛着ARM架构投诚了。看到《赛博朋克2077》...

怎么把视频的声音提出来转为音频?音频提取,11款工具实测搞定

想把视频里的声音单独保存为音频文件(MP3/AAC/WAV/FLAC)用于配音、播客、听课或二次剪辑?本文挑出10款常用工具,给出实测可复现的操作步骤、优缺点和场景推荐。1)转换猫mp3转换器(操作门...

6个mp4格式转换器测评:转换速度与质量并存!

MP4视频格式具有兼容性强、视频画质高清、文件体积较小、支持多种编码等特点,适用于网络媒体传播。如果大家想要将非MP4格式的视频转换成MP4的视频格式的话,可以使用MP4格式转换器更换格式。本文分别从...