课程进阶
斯坦福 CS234:强化学习(2026 冬)
这是斯坦福大学 CS234 强化学习课程 2026 年冬季学期的课程网站,包含课程安排、讲义材料、作业、课程项目和论坛等栏目。课程介绍强化学习这一让自主系统学会做决策的方法及其在机器人、游戏、消费者建模和医疗等领域的应用,内容涵盖泛化与探索等核心挑战,作业涉及强化学习基础、深度强化学习以及基于人类反馈的强化学习基础。课程由 Emma Brunskill 讲授,先修要求为熟练掌握 Python。
- 分级
- 值得看
- 所属主题
- 强化学习与对齐
- 收录时间
- 2026-10-29
- 难度
- 进阶
- 语言
- 英文
- 动手
- 3 次作业 · 课程项目
学完你能
- 说明强化学习区别于其他 AI 与非交互式机器学习的关键特征
- 把具体应用问题判断并形式化为强化学习问题,包括状态空间、动作空间、动力学与奖励模型
- 为给定问题选出课程中的适用算法并说明理由
- 用代码实现常见的强化学习算法
- 用 regret、样本复杂度、计算复杂度、实证表现、收敛性等指标分析并评价算法
- 阐述探索与利用的权衡,并比较至少两种应对方法
适合你吗
适合
- 已具备机器学习基础、想系统入门强化学习的学生
- 会 Python 并希望动手实现强化学习算法的人
- 对深度强化学习与基于人类反馈的强化学习感兴趣的人
- 能投入一学期并完成课程项目与考试的学习者
暂不适合
- 不具备微积分、线性代数与概率统计基础的人
- 没有机器学习基础、不熟悉代价函数与梯度下降优化的人
- 只想看视频、不打算做作业与项目的人
需要先会
需要熟练使用 Python;大学微积分与线性代数(如 MATH 51、CME 100);基础概率统计(如 CS 109);机器学习基础(如 CS 221 或 CS 229 覆盖的代价函数、求导与梯度下降优化)。
课程特点
- 内容侧重
- 强化学习核心挑战与方法,含泛化与探索,并涉及深度强化学习与基于人类反馈的强化学习基础。
- 练习与项目
- 3 次书面与编程作业(后期作业提供部分云资源)、8 次辅导课(仅在校生,计成绩)、期中考试、随堂测验、课程项目(提案、里程碑、海报展示、论文)。
- 投入时间
- 讲座每周一、周三 15:00–16:20 直播,共 10 周课程安排外加期末周;辅导课与答疑时间在第一周公布。
- 费用说明
- 材料未提及费用、证书或会员信息。
内容覆盖
- 强化学习导论
- 表格型 MDP 规划
- 策略评估
- Q-learning 与函数近似
- 策略搜索
- 离线强化学习、模仿学习
- 离线强化学习、RLHF
- 离线强化学习 / 多臂老虎机
- 策略性数据收集 / 探索
- 探索
- 强化学习与 MCTS
- 特邀讲座
- 对齐与影响