CMU10-703
- 难度
- 中阶
- 形式
- 大学课程
- 语言
- 英文
- 规模
- 37 个课节
- 内容费用
- 免费
- 动手
- 需要动手环境
使用限制
课表与讲义公开;官方教程放在需要登录的 Google Drive,作业起始代码未公开。
- 练习与作业
- Google 账号(官方教程在 Google Drive)当期作业起始代码未公开
第一次学这门课?先完成学前准备,把课程目录搭好。
每节课这样学
- 发提示词把下面的每课提示词发给 AI Agent,它会准备这一课的练习文件。
- 学官方课节打开对应课节学习,按提示从第一道练习做起;它不会替你写答案。
- 记进度学完让 AI Agent 在 progress.md 勾选,并把疑问整理到 questions.md。
每课提示词 · 每次学习前用
继续学习「CMU 10-703:Deep Reinforcement Learning(2026 秋)」。课程目录是 cmu-10703-fall2026/(不知道完整路径就先问我)。 1. 读 progress.md,找到下一课;如果我指定了第几课,就准备那一课。 2. 打开这一课的官方页面和本地讲义,列出本课练习要用的工具、文件和样例数据。缺少的先告诉我,等我同意再安装或下载。 3. 在 lessons/ 对应的课节文件夹里准备好练习:exercises/ 里给每道题建一个文件,写上题号和题目原文链接,不写答案;已有文件保留,样例数据放到 data/。拿不到官方题目或起始代码时记录限制,不编造替代品。 4. 按 README 运行开课时生成的自检脚本或在线检查清单,并检查本课新增工具能否正常使用。 5. 告诉我:本课先读哪几节、从哪道练习开始、大约需要多久。我学完后,帮我在 progress.md 勾选并把问题整理到 questions.md。 边界: - 需要管理员权限、会产生费用或需要填写密钥的操作,先告诉我原因,等我同意。密钥由我在本机配置,不发到聊天,不写进笔记或版本库;原项目需要 .env 时确认已被 Git 忽略。 - 不替我写练习或作业答案,也不替我提交。我卡住时只给提示;我明确要求时才给解答。 - 只下载许可允许个人保存的材料;其余只放链接。不把未运行的命令说成成功。
课节共 37 节 · 官方顺序
- 01Lecture #1 (Max, Katerina): Welcome and Introduction to the Class
- 02Lecture #2 (Max): Introduction to Reinforcement Learning
- 03Recitation #1: Neural Nets, PyTorch, Gymnasium(材料链接暂不可用)
- 04Lecture #3 (Max): Policy Gradient Methods
- 05Lecture #4 (Max): Actor-Critic Methods (cont.) Evolutionary Methods for Policy Search
- 06Recitation #2: MDPs, Policy Gradients, & HW1
- 07Lecture #5 (Max): Value-based Methods
- 08Recitation #3: Value-Based Methods and Actor-Critic Methods & HW2
- 09Lecture #6 (Max): Value based methods (Cont.)
- 10Lecture #7 (Max): Advanced Policy Gradient Methods
- 11Recitation #4: Policy-Based Methods & HW3
- 12Lecture #8 (Max): Advanced Policy Gradient Methods (Cont.)
展开其余 25 节
- 13Lecture #9 (Max): Off-Policy Actor-Critic and Max-Ent RL
- 14Recitation #5: Strengths and Weaknesses of Different Algorithms
- 15Lecture #10 (Max): Imitation Learning
- 16Lecture #11 (Max): Imitation Learning and Diffusion
- 17Recitation #6: Midterm Review & HW4
- 18Lecture #12 (Max): Offline and Offline-to-Online RL
- 19Lecture #13 (Max): Reinforcement Learning & Generative Modeling
- 20Lecture #14 (Katerina): Model-based Methods
- 21Recitation #8: Midterm Solution Session & HW5
- 22Lecture #15 (Katerina): Model-based Methods(Cont.)
- 23Lecture #16 (Katerina): Model-based Methods(Cont.), Learning and Tree-Search Planning
- 24Recitation #9: TD-MPC & PETS
- 25Lecture #17 (Katerina): Model-based Methods for offline RL
- 26Lecture #18 (Katerina): Guided Diffusion
- 27Recitation #10: Exploration
- 28Lecture #19 (Katerina): Exploration
- 29Lecture #20 (Katerina): Sim2Real Learning
- 30Recitation #11: Sim2Real and HW6
- 31Lecture #21 (Katerina): Sim2Real Learning (Cont.) R
- 32Lecture #22 (Katerina): RL with Foundation Models
- 33Recitation #12: RL with Foundation Models
- 34Lecture #23 (Katerina): RL with Foundation Models (Cont.)
- 35Lecture #24 (Katerina): Goal-Driven Reasoning for Multimodal AI Agents
- 36Lecture #25 : Projects
- 37Lecture #26 : Projects
来源与使用须知
- 原始资源
- CMU 10-703 收录版本:2026 秋
- 收录时间
- 本站首次收录 2026-10-10
- 指南参考
- 官方课节顺序及材料入口
版权与转载
- 教学复用允许,需保留版权声明和来源署名:使用条件以原站说明为准;适用范围以原站说明为准,第三方材料可能另有条款。原站说明
- 其余材料未标明许可:仅供个人学习,转载、修改或商用前请先联系原作者。
- 本站只提供原始链接和学习指南,不转载、不镜像课程材料;引用时请注明原作者与出处。