ARTICLE
斯皮尔曼等级相关系数
斯皮尔曼等级相关系数 (Spearman's Rank Correlation Coefficient) 斯皮尔曼等级相关系数 (Spearman's Rank Correlation Coefficient),通常用希腊字母 (rho) 或 r_s 表示,是一种用于衡量两个变量之间相关性强度和方向的非参数统计指标。与更常见的皮尔逊相关系数(Pearson
斯皮尔曼等级相关系数 (Spearman's Rank Correlation Coefficient)
斯皮尔曼等级相关系数 (Spearman's Rank Correlation Coefficient),通常用希腊字母 (rho) 或 表示,是一种用于衡量两个变量之间相关性强度和方向的非参数统计指标。与更常见的皮尔逊相关系数(Pearson Correlation Coefficient)测量线性关系不同,斯皮尔曼系数评估的是两个变量之间的单调关系 (Monotonic Relationship)。
该系数由英国心理学家与统计学家[[查尔斯·斯皮尔曼]] (Charles Spearman) 提出,其核心思想是,通过比较两个变量的秩次 (Ranks) 而非原始数值来评估它们的关联性。这使得斯皮尔曼系数对于数据的分布没有严格要求,并且对异常值 (Outliers) 不敏感,因而具有很强的稳健性。
核心原理:单调关系与秩次
要理解斯皮尔曼系数,必须先掌握两个基本概念:单调关系和秩次。
1. 单调关系 (Monotonic Relationship)
单调关系是指当一个变量增加时,另一个变量也随之呈现出持续增加或持续减少的趋势,但这种趋势不一定是线性的。
- 单调递增 (Monotonically Increasing):一个变量增加,另一个变量也随之增加或保持不变。例如,投入学习的时间越长,考试成绩通常越高(尽管每多学一小时带来的分数提升可能不同)。
- 单调递减 (Monotonically Decreasing):一个变量增加,另一个变量随之减少或保持不变。例如,汽车的使用年限越长,其二手转售价值通常越低。
斯皮尔曼系数专门用于量化这种单调关系,而皮尔逊系数可能无法准确捕捉非线性的单调趋势。
2. 秩次 (Rank)
秩次,或称等级,是指将一组数据按升序(或降序)排列后,每个数值所处的位置。斯皮尔曼系数的计算正是基于这些秩次。
- 转换过程:对每个变量的观测值进行独立排序,并赋予它们从 1 到 (样本量) 的秩次。
- 处理重复值 (Ties):如果在数据中存在相同值的观测,则需要对它们赋予相同的平均秩次。例如,在一组数据 {10, 20, 20, 30} 中,10的秩次是1,30的秩次是4。两个20占据了第2和第3的位置,因此它们的秩次都是这两个位置的平均值,即 。
计算公式
斯皮尔曼等级相关系数的计算本质上是对两个变量的秩次数据计算皮尔逊相关系数。
在没有重复值的情况下,可以使用一个简化的公式:
其中:
- 是斯皮尔曼等级相关系数。
- 是第 对观测值在两个变量中的秩次之差,即 。
- 是观测值的对数(样本量)。
- 是秩次差的平方和。
当数据中存在大量重复值时,上述简化公式会产生偏差。在这种情况下,应使用标准的皮尔逊相关系数公式,但将其应用于秩次数据:
其中:
- 分别是第 个观测值在变量 和 中的秩次。
- 分别是变量 和 秩次的平均值。
系数的解释
斯皮尔曼系数 的取值范围在 -1 到 +1 之间,其解释如下:
- :表示一个完美的正向单调关系。当一个变量的秩次增加时,另一个变量的秩次也随之增加。
- :表示一个完美的负向单调关系。当一个变量的秩次增加时,另一个变量的秩次随之减少。
- :表示两个变量之间不存在单调关系。
- :表示一个正向单调关系。 的值越接近1,关系越强。
- :表示一个负向单调关系。 的值越接近-1,关系越强。
通常,可以根据系数的绝对值来大致判断相关性的强度(但这依赖于具体研究领域):
- :弱相关
- :中等相关
- :强相关
计算步骤示例
假设我们有两组数据:数学成绩 () 和物理成绩 (),我们想知道它们之间是否存在单调关系。
| 学生 | 数学成绩 (X) | 物理成绩 (Y) | Rank(X) | Rank(Y) | | | | :--- | :---: | :---: | :---: | :---: | :---: | :---: | | A | 85 | 90 | 4 | 5 | -1 | 1 | | B | 92 | 88 | 5 | 4 | 1 | 1 | | C | 75 | 70 | 2 | 1 | 1 | 1 | | D | 60 | 75 | 1 | 2 | -1 | 1 | | E | 80 | 78 | 3 | 3 | 0 | 0 |
- 列出数据:如上表所示,样本量 。
- 对X进行排序和秩次分配: 从小到大依次为 {60, 75, 80, 85, 92},对应秩次为 {1, 2, 3, 4, 5}。
- 对Y进行排序和秩次分配: 从小到大依次为 {70, 75, 78, 88, 90},对应秩次为 {1, 2, 3, 4, 5}。
- 计算秩次差 :将每对观测值的秩次相减。
- 计算秩次差的平方 。
- 求和 :。
- 代入公式计算:
- 解释结果: 表明数学成绩和物理成绩之间存在一个强正向单调关系。成绩好的学生在一个科目上通常在另一个科目上也表现出色。
假设检验
计算出的样本相关系数 是否具有统计显著性,需要通过假设检验来判断。
对于小样本(例如 ),可以直接查询斯皮尔曼系数的临界值表。如果计算出的 的绝对值大于给定显著性水平(如 )下的临界值,则拒绝原假设。
对于大样本(例如 ),可以使用一个近似于t分布的检验统计量:
该统计量服从自由度为 的t分布。通过计算出的 值和对应的p-value,可以判断结果的显著性。如果 p-value 小于 ,则拒绝原假设。
应用与优势
斯皮尔曼系数是统计分析中一个非常实用和灵活的工具。
何时使用斯皮尔曼系数:
- 数据为序数数据 (Ordinal Data):当数据本身就是等级或排序形式时(如比赛名次、满意度评级),斯皮尔曼是理想选择。
- 数据不满足参数假设:当区间数据或比率数据严重偏离正态分布时,使用斯皮尔曼系数比皮尔逊系数更可靠。
- 怀疑存在非线性单调关系:当变量间的关系是单调但非线性时,皮尔逊系数可能会低估其关联强度,而斯皮尔曼系数能更好地捕捉这种趋势。
- 存在异常值:由于斯皮尔曼系数使用秩次,它对极端值不敏感。一个极大的异常值只会被赋予最高秩次,其具体数值大小不影响最终计算,这使得分析结果更为稳健。
与皮尔逊系数的对比:
总而言之,斯皮尔曼等级相关系数是一个强大的非参数工具,它通过秩次变换,为评估不同类型数据间的单调关系提供了可靠且稳健的方法。