Stanford AI 课程地图 EN GitHub ↗
← 返回课程地图
Stanford · 2026—27 MS&E 235A 统计与优化 —

延伸课程 · 统计与优化

马尔可夫决策过程

Markov Decision Processes (EE 283)

MDP、值迭代、策略迭代与 bandit 基础。

3 学分 2026 秋 Letter or Credit/No Credit —
马尔可夫决策过程

课程定位

MDP、值迭代、策略迭代与 bandit 基础。 本页保留官方档案与入口,具体内容与考核以当季官网为准。

主要内容

本页为延伸课程速览,主要内容见下方官方描述。

先修

见官方描述(延伸课程暂未单独整理先修)。

考核与工作量

以当季官网为准(延伸课程暂未单独整理考核)。

适合谁

对「马尔可夫决策过程」方向感兴趣的人。

学习建议

先读官方描述和课程官网,再判断是否适合自己。

相关课程

官方课程描述(英文原文)

Formulation and solution of sequential decision problems under uncertainty as a foundation for artificial intelligence, operations research, and economics. Finite-horizon, discounted, and average reward objectives. Optimization via value iteration, policy iteration, linear programming, and reinforcement learning algorithms. Semi-Markov decision processes. Multi-armed bandits and the Gittin's index theorem. Use of partial state information. Homework assignments involve a combination of analytic and computational exercises.