拉格朗日乘数法 (Lagrange Multiplier Method)
拉格朗日乘数法是在优化问题中寻找多元函数在等式约束下极值的核心方法。它将有约束优化转化为无约束优化,通过引入拉格朗日乘数 (Lagrange Multiplier) λ 实现。由数学家约瑟夫·拉格朗日提出。
核心思想与几何直观
在最优点,目标函数 f 的等高线与约束曲线 g(x,y)=c 相切。这意味着两个梯度平行:
∇f(x∗,y∗)=λ∇g(x∗,y∗)
其中 λ 就是拉格朗日乘数。
拉格朗日函数与求解步骤
对于目标函数 f(x1,…,xn) 和约束 g(x1,…,xn)=c:
L(x1,…,xn,λ)=f(x1,…,xn)−λ(g(x1,…,xn)−c)
一阶必要条件(产生 n+1 个方程和 n+1 个未知数):
∂xi∂L=∂xi∂f−λ∂xi∂g=0,∂λ∂L=−(g−c)=0
详细案例:效用最大化
目标:最大化 U(x,y)=xy,约束:2x+5y=100(价格 px=2, py=5,收入 M=100)。
第一步:构建拉格朗日函数
L(x,y,λ)=xy−λ(2x+5y−100)
第二步:求偏导
∂x∂L=y−2λ=0,∂y∂L=x−5λ=0,∂λ∂L=−(2x+5y−100)=0
第三步:求解得 y=2λ, x=5λ,相除得 x/y=5/2 即 2x=5y。
经济学解释:λ=MUx/px=MUy/py,即在最优点,每单位货币花费在两种商品上的边际效用相等。
代入预算约束:10y=100⟹y=10,x=25,λ=5。最大效用 U(25,10)=250。
λ 的经济学解释:λ=5 表示收入增加1单位,最大效用约增加5。即 λ=∂Umax/∂M,称为收入的边际效用。
扩展
多个等式约束:为每个约束引入 λi,L=f−∑λi(gi−ci)。梯度关系:∇f=∑λi∇gi。
不等式约束与KKT条件:推广至卡鲁什-库恩-塔克条件。引入互补松弛性:λ(g(x)−c)=0。如果约束不饱和(g(x)<c),则 λ=0;如果 λ>0,则约束必须饱和(g(x)=c)。