ARTICLE
肯德尔等级相关系数
肯德尔等级相关系数 (Kendall Rank Correlation Coefficient) 肯德尔等级相关系数(Kendall's ,读作"tau")是非参数统计中衡量两个有序变量之间关联程度的统计量,由英国统计学家莫里斯·肯德尔(Maurice Kendall)于1938年提出。与皮尔逊相关系数度量线性关系不同,肯德尔 基于观测值对的"一致"与"不一
肯德尔等级相关系数 (Kendall Rank Correlation Coefficient)
肯德尔等级相关系数(Kendall's ,读作"tau")是非参数统计中衡量两个有序变量之间关联程度的统计量,由英国统计学家莫里斯·肯德尔(Maurice Kendall)于1938年提出。与皮尔逊相关系数度量线性关系不同,肯德尔基于观测值对的"一致"与"不一致"来评估变量间的单调相关性。其核心直觉是:如果两个变量的排序高度一致,那么任意一对观测中,两个变量的相对大小关系应当同向。
肯德尔属于等级相关系数的一种,与斯皮尔曼等级相关系数并列为最常用的两种基于秩的关联度量。相较于斯皮尔曼,肯德尔具有更直接的概率解释——它可理解为随机抽取一对观测,其排序一致的概率减去排序不一致的概率——且在小样本下统计推断性质更优。
形式化定义
设有 对观测值 。对任意两对观测 :
- 若 ,则称 为一致对(concordant pair);
- 若 ,则称 为不一致对(discordant pair);
- 若 或 ,则称其为结(tie)。
记 为一致对的数量, 为不一致对的数量,则最基本的肯德尔 定义为:
其取值范围为 : 表示两个排序完全一致, 表示完全相反, 表示无单调关联。该统计量具有对称性,即 。
考虑结的变体
实际数据中常出现"结"(相等值),上述 仅在无结时达到 。为此,肯德尔提出了修正版本。
(Kendall's tau-b):适用于方表数据,修正公式为
其中 为变量 中所有结组对应配对数的和( 为各结组的大小), 同理。 在有结时仍可达到 (仅当两个变量结结构完全一致时)。
(Kendall's tau-c,也称 Stuart's tau-c):适用于非方表的列联表数据,定义为
其中 分别为行、列类别数。 可达到 无论边际分布如何,在列联表分析中应用较广。
三种变体的选择依赖于数据特征:无结时三者等价;存在结且行列数相近时宜用 ;列联表分析中 更为合适。
统计推断
假设检验:检验原假设 (无单调关联)对双侧备择 。
对于小样本 (),可使用 的精确分布临界值表。对于大样本,肯德尔证明了在 下, 的分布渐近于正态分布:
标准化的检验统计量为:
若存在结, 的方差公式更为复杂,一般形式为:
实际应用中多借助统计软件(如 R 的 \texttt{cor.test} 或 Python 的 \texttt{scipy.stats.kendalltau})完成推断。
置信区间:在大样本下,可通过 Fisher -变换或直接使用渐近正态性构造 的置信区间。
与斯皮尔曼 的比较
肯德尔 和斯皮尔曼 同为基于秩的相关系数,但存在以下关键区别:
- 解释性: 有直接的概率解释—— 即为随机抽取一对观测其为一致对的概率。斯皮尔曼 缺乏如此直观的概率含义。
- 效率:在二元正态总体下, 的渐近相对效率(ARE)约为 ,略低于斯皮尔曼 的 相对于皮尔逊相关系数。这意味着在大样本正态数据下, 效率略低,但在厚尾分布下鲁棒性更优。
- 收敛速度: 的抽样分布更快趋近正态,小样本下推断更可靠。
- 对异常值的敏感性: 基于符号而非数值差,比斯皮尔曼 更不受极端秩差异的影响。
- 数值范围:对于相同数据,通常 ,即斯皮尔曼 的绝对值往往更大。
实践中,两者常同时报告以增强结论的稳健性。若 和 给出的结论一致,则关联的可信度更高。
经济学与社会科学应用
肯德尔 在经济学研究中应用广泛:
收入与消费排序的一致性:研究不同时期家庭收入排名的稳定性, 可直接度量排名变动的幅度。例如,比较基期与报告期家庭收入五分位排序, 可解释为随机选两户家庭,其收入排序在前后一致的净概率为 0.8。
多指标综合评估:在福利经济学和发展经济学中,不同指标(如人类发展指数各分项)对国家排名的评价常产生分歧, 可用于量化指标间排名的一致性程度,作为评价指标体系内部协调性的依据。
时间序列趋势检测:Mann-Kendall趋势检验是环境经济学和气候经济学中广泛使用的非参数趋势检验方法,其核心统计量即为肯德尔 。该检验不要求数据服从特定分布,对缺失值和异常值具有较强的鲁棒性,常用于分析温度、降水、污染物浓度等长期单调趋势。
模型预测的秩评估:在计量经济学模型比较中,肯德尔 可用于评估模型预测排序与实际排序之间的一致性,作为预测能力的非参数度量,尤其适用于关注排序而非精确数值的场景,如信用评级、推荐系统中的协同过滤等。
此外, 也广泛用于产业组织中的市场集中度趋势分析和劳动经济学中的职业流动性研究。
注意事项与局限性
使用肯德尔 时需注意以下几点:首先, 仅捕捉单调关系,无法检测非线性非单调模式(如 U 形关系),此时 可能接近零而实际存在强关联。其次,大量结的存在会压缩 的取值范围,即使 有所修正,解释时仍需谨慎。最后, 的计算复杂度为 ,在大数据集上计算效率低于 的斯皮尔曼 或 的皮尔逊相关系数,实际应用中需根据数据规模权衡。