迭代期望定律 (Law of Iterated Expectations)
迭代期望定律(Law of Iterated Expectations,LIE),也称重叠期望定律或塔性质(Tower Property),是概率论与计量经济学中的基础定理。该定律陈述:对于可积随机变量Y和任意随机变量X,E[Y]=EX[E[Y∣X]],即Y的无条件期望等于给定X时Y的条件期望再对X取期望。更一般地,若G⊆H为子σ-代数,则E[E[Y∣H]∣G]=E[Y∣G]。迭代期望定律是连接条件期望与无条件期望的桥梁,在回归分析、预测理论、资产定价和贝叶斯统计中广泛应用。
形式化定义与直观
设(Ω,F,P)为概率空间,Y可积(E[∣Y∣]<∞),X为任意随机变量。迭代期望定律的最常见形式为:
E[Y]=E[E[Y∣X]].
其中E[Y∣X]是给定X时Y的条件期望,它是X的函数,本身是一个随机变量。外层期望对该随机变量取期望,恢复Y的总体均值。
直观上,该定律可通过分段平均来理解:将总体按X的取值划分为若干子群,先计算每个子群内Y的均值E[Y∣X=x],再以各子群在总体中的比例P(X=x)为权重,对所有子群均值加权平均——结果恰好等于总体均值E[Y]。例如将学生按性别分组,计算男生和女生的平均分并加权,即得全校平均分。无论按何种分组方式,只要分组覆盖全体且不重叠,加权结果必然一致——这正是LIE的实质。
一般塔性质
若G⊆H⊆F,则对可积随机变量Y:
E[E[Y∣H]∣G]=E[Y∣G].
该形式揭示:较小信息集下的条件期望等于先在大信息集下取条件期望再对较小信息集取条件期望。当G={∅,Ω}(平凡σ-代数)时,条件期望退化为无条件期望,即得简化形式。塔性质确保了反复条件化不会引入偏误,即"平均的平均就是总平均"。
在计量经济学中的应用
在线性回归模型中,迭代期望定律是理解零条件均值假设的基础。对于回归模型Y=β0+β1X+ϵ,关键假设E[ϵ∣X]=0结合LIE可推出:
- E[ϵ]=E[E[ϵ∣X]]=0:误差项无条件均值为零。
- Cov(X,ϵ)=0:由E[Xϵ]=E[X⋅E[ϵ∣X]]=0得证。
在工具变量(IV)估计中,LIE为推导两阶段最小二乘法的一致性提供概率基础:第一阶段预测值X^满足与结构误差的正交条件。在面板数据的固定效应模型中,LIE用于处理个体异质性与误差项的相关性结构。
预测理论与方差分解
迭代期望定律是预测理论的核心。设Y^=E[Y∣X]为基于信息X的最优预测,则条件期望是均方误差最小的预测函数,且LIE保证使用更多信息不会使预测的期望偏离真实值。
与条件方差分解公式紧密相连:
Var(Y)=Var(E[Y∣X])+E[Var(Y∣X)].
该分解将Y的总变异性分为可由X解释的部分(组间方差)和不可解释的部分(组内方差),是方差分析的理论基础,也是回归中R平方定义的概率来源。
与相关概念的关系
在贝叶斯统计中,LIE对应于后验期望的无偏性:后验均值E[θ∣data]的先验期望等于先验均值E[θ],即E[E[θ∣data]]=E[θ]。
在资产定价中,随机贴现因子M满足E[MR]=1(R为资产收益)。通过LIE将无条件定价关系分解为条件形式E[MR∣Ft]=1,据此导出条件CAPM和时变风险溢价的实证框架。Hansen-Jagannathan界限的推导也依赖LIE。
局限性
迭代期望定律要求E[∣Y∣]<∞(Y可积),否则条件期望无定义。在极值理论和某些厚尾分布(如柯西分布)中,该条件可能不满足。此外,当用样本估计E[Y∣X]时,非参数估计的误差会通过LIE传播至无条件推断,需结合渐近理论审慎处理。