∑

数学知识体系

Observatory Archive of Mathematics
⌕2026/8/31
概念

随机最优控制

Merton 问题用动态规划与 HJB 方程求解多期最优消费投资策略,是随机控制理论在金融中的经典应用。

所属主题:金融数学 ↗
阅读路径

参考可汗学院 Get ready 机制:先修概念 → 当前概念 → 进阶概念,✓ 表示已读。

当前概念

随机最优控制金融数学

01定义

Merton 问题把终身消费投资化为连续时间随机控制:动态规划原理导出 HJB 方程,最优策略是反馈律。CRRA 效用下 Merton 给出闭式解——股票配置比例恒定。它是随机控制理论在金融中的旗舰应用,也是强化学习思想的数学原型。
动态规划:最优策略的每段子路径仍最优 V(t,x) = 从财富 x 出发的最大期望效用 HJB:V_t + max_{c,π}{ … } = 0 状态 = (时间, 财富);控制 = (消费率, 股票比例) Merton 解:π* = (μ−r)/(γσ²) 恒定(CRRA 效用) 风险厌恶 γ 越大,股票占比越低
HJB 方程:随机世界的贝尔曼方程

02核心要点

01

HJB 方程

Vt+max⁡c,π{u(c)+Lc,πV}=0V_t+\max_{c,\pi}\{u(c)+\mathcal{L}^{c,\pi}V\}=0:生成元 L\mathcal{L} 含财富的漂移与扩散;验证定理保证解即最优值函数,max 处给出反馈最优策略。

02

Merton 比例

CRRA 效用 + 常数机会集 ⇒\Rightarrow 最优股票比例 π∗=μ−rγσ2\pi^*=\frac{\mu-r}{\gamma\sigma^2} 与财富无关:简洁到可以直接教学,深刻到成为所有生命周期模型的基准。

03

现实的扩展

劳动收入、交易成本、随机波动率、退休约束逐一加入:自由边界(停时控制)、粘性解、对偶方法轮番上阵——Merton 问题是随机控制方法学的演练场。

03关键公式

π∗=μ−rγσ2,Vt+max⁡c,π{u(c)+LV}=0\pi^{*}=\frac{\mu-r}{\gamma\sigma^2},\quad V_t+\max_{c,\pi}\left\{u(c)+\mathcal{L}V\right\}=0

04历史沿革

贝尔曼 1950 年代创立动态规划;默顿 1969-1971 年系列论文解决连续时间消费投资问题,1997 年因衍生品定价获诺奖;HJB 方法现为量化研究的标准工具。

05应用与延伸

目标日期基金的下滑曲线设计、保险公司动态对冲、期权执行与实物期权的最优停时、算法交易的最优执行(Almgren-Chriss)。

06交互演示

HJB 方程中的逐点最优化价值函数满足 max_u{ f(x,u) + A^u V } = 0:对每个状态 x 取使括号最大的控制 u*

07相关概念