Sebastian Raschka, PhD(个人博客) · Sebastian Raschka
The NeurIPS 2023 LLM Efficiency Challenge Starter Guide
The NeurIPS 2023 LLM Efficiency Challenge Starter Guide是Sebastian Raschka, PhD(个人博客)的免费实践教程(en)。前置条件:需要基本 Python 与命令行能力,了解虚拟环境、git 与 PyTorch 训练流程。
能按教程搭建 LLM 高效微调的项目环境、安装 Lit-GPT 与依赖,并了解该挑战赛的规则与 Lit-GPT 起始工具包。
- 难度
- 见前置条件
- 类型
- 博客 · 实践教程
- 语言
- en
- 规模
- 1 个课节
- 内容费用
- 免费
- 动手
- 需要动手环境
使用限制
文章公开可读;动手实践需要文中允许的 NVIDIA GPU,环境与依赖需自行安装。
- 练习与作业
- A100 40GB 或 RTX 4090 24GB(文中列出的允许 GPU)
- 内容提示
- 内容时效:网页标注 2023 年 8 月 10 日发布,围绕 NeurIPS 2023 竞赛展开,正文多处写明规则以“as of this writing”为准,并有更新说明 Alpaca-Libre 已被竞赛禁用,文中数据集与模型清单仅代表当时状态。
第一次学这门课?先完成学前准备,把课程目录搭好。
每节课这样学
- 发提示词把下面的每课提示词发给 AI Agent,它会准备这一课的练习文件。
- 学官方课节打开对应课节学习,按提示从第一道练习做起;它不会替你写答案。
- 记进度学完让 AI Agent 在 progress.md 勾选,并把疑问整理到 questions.md。
继续学习「The NeurIPS 2023 LLM Efficiency Challenge Starter Guide」。课程目录是 neurips-2023-llm-efficiency-guide/(不知道完整路径就先问我)。 1. 读 progress.md,找到下一课;如果我指定了第几课,就准备那一课。 2. 打开这一课的官方页面和本地讲义,列出本课练习要用的工具、文件和样例数据。缺少的先告诉我,等我同意再安装或下载。 3. 在 lessons/ 对应的课节文件夹里准备好练习:exercises/ 里给每道题建一个文件,写上题号和题目原文链接,不写答案;已有文件保留,样例数据放到 data/。拿不到官方题目或起始代码时记录限制,不编造替代品。 4. 按 README 运行开课时生成的自检脚本或在线检查清单,并检查本课新增工具能否正常使用。 5. 告诉我:本课先读哪几节、从哪道练习开始、大约需要多久。我学完后,帮我在 progress.md 勾选并把问题整理到 questions.md。 边界: - 需要管理员权限、会产生费用或需要填写密钥的操作,先告诉我原因,等我同意。密钥由我在本机配置,不发到聊天,不写进笔记或版本库;原项目需要 .env 时确认已被 Git 忽略。 - 不替我写练习或作业答案,也不替我提交。我卡住时只给提示;我明确要求时才给解答。 - 只下载许可允许个人保存的材料;其余只放链接。不把未运行的命令说成成功。
课节共 1 节 · 官方顺序
常见问题
免费吗?
免费:节选可直接读到教程正文与操作步骤,未见付费墙或登录拦截说明。实践可能产生费用:跟做需要 A100 或 RTX 4090 GPU 机器;网页未说明费用来源,自备硬件或云 GPU 可能产生费用。
需要什么基础?
需要基本 Python 与命令行能力,了解虚拟环境、git 与 PyTorch 训练流程。软件、账号与硬件:一块文中列出允许的 NVIDIA GPU(A100 40GB 或 RTX 4090 24GB);文中示例安装步骤以 Linux 安装脚本为例,其他系统未说明;能下载较大的模型权重。
有中文吗?
本站记录的语言是en;是否有中文字幕或译本本站未核实,请以原站为准。
怎么开始?
从原始资源入口开始:https://sebastianraschka.com/blog/2023/neurips2023-starter-guide.html。本页“学前准备”列出环境与工具,“学习指南”给出开课提示词,可以在自己的电脑上按步骤开始。开课提示词尚未完整验证。练习与作业需要自备:A100 40GB 或 RTX 4090 24GB(文中列出的允许 GPU)。
来源与使用须知
- 收录时间
- 本站首次收录 2026-10-26原站首次发布 2023-08-10
- 指南参考
- 课程主页
版权与转载
- 课程材料未标明许可:仅供个人学习,转载、修改或商用前请先联系原作者。
- 本站只提供原始链接和学习指南,不转载、不镜像课程材料;引用时请注明原作者与出处。