# AI 模型评估

- 原标题：AI Model Evaluation
- 类型：书籍
- 来源：Manning
- 发布时间：2026-10-27
- 首次精选：2026-10-27 16:17
- 分级：值得看
- 学习层级：进阶
- 主题：[agent-evaluation-reliability](<https://oplearnx.com/md/topics/agent-evaluation-reliability.md>)（第 28 位）、[judges-quality-validation](<https://oplearnx.com/md/topics/judges-quality-validation.md>)（第 40 位）、[model-benchmarks](<https://oplearnx.com/md/topics/model-benchmarks.md>)（第 48 位）
- 原文链接：[https://manning.com/books/ai-model-evaluation](<https://manning.com/books/ai-model-evaluation>)
- 本站页面：[https://oplearnx.com/resources/pk\_8e15fb32f9f2](<https://oplearnx.com/resources/pk_8e15fb32f9f2>)

## 摘要

Leemay Nassery 撰写、Manning Publications 出版的书籍，共 250 页，预计出版日期为 2027-01-15，尚未出版，目前在 Manning MEAP 目录中连载。内容围绕模型上线前的评估与上线后的运行，包括离线诊断评估、用影子流量模拟生产条件、设计 A/B 测试验证模型对产品指标的影响、以人在回路反馈发现细微失败、以及用 LLM 作为自动评判者扩展评估流程。作者介绍了其在 Spotify、Comcast、Dropbox、Etsy 等公司从事实验与个性化工作的经验。

---
来源：LearnMap · 学径（https://oplearnx.com）