课程定位
MDP、值迭代、策略迭代与 bandit 基础。 本页保留官方档案与入口,具体内容与考核以当季官网为准。
主要内容
本页为延伸课程速览,主要内容见下方官方描述。
先修
见官方描述(延伸课程暂未单独整理先修)。
考核与工作量
以当季官网为准(延伸课程暂未单独整理考核)。
适合谁
对「马尔可夫决策过程」方向感兴趣的人。
学习建议
先读官方描述和课程官网,再判断是否适合自己。
相关课程
官方课程描述(英文原文)
Formulation and solution of sequential decision problems under uncertainty as a foundation for artificial intelligence, operations research, and economics. Finite-horizon, discounted, and average reward objectives. Optimization via value iteration, policy iteration, linear programming, and reinforcement learning algorithms. Semi-Markov decision processes. Multi-armed bandits and the Gittin's index theorem. Use of partial state information. Homework assignments involve a combination of analytic and computational exercises.