# 1368 起 AI 失败案例及其对评估的启示 — Vishal Srivastava（纽约人寿）& Tanmay Sah

- 原标题：1,368 AI Failures and What They Teach About Evals — Vishal Srivastava, New York Life & Tanmay Sah
- 类型：博客
- 来源：YouTube
- 发布时间：2026-10-22
- 首次精选：2026-10-26 16:31
- 分级：值得看
- 学习层级：进阶
- 主题：[agent-evaluation-reliability](<https://oplearnx.com/md/topics/agent-evaluation-reliability.md>)（第 9 位）、[ai-privacy-governance](<https://oplearnx.com/md/topics/ai-privacy-governance.md>)（第 12 位）
- 原文链接：[https://youtube.com/watch?v=mMw3arwQsL0](<https://youtube.com/watch?v=mMw3arwQsL0>)
- 本站页面：[https://oplearnx.com/resources/pk\_cedf513aee6a](<https://oplearnx.com/resources/pk_cedf513aee6a>)

## 摘要

这是一段会议演讲录像，讲者分析了公共 AI 事故数据库中的 1368 起事件，考察真实失败能为 AI 系统测试方式提供什么启示。他们把失败归入技术能力、部署管控和业务影响三个维度及 13 个子类别（覆盖约 98% 的事故），指出人工复核、监控等部署管控薄弱与危害关联最紧密，并介绍了按风险大小排序用例、检验评估器本身、以及用“构建—攻破—修复”循环主动找系统错误的方法，最后以一家航空公司聊天机器人给出错误退款政策为例。材料未说明适合谁读。

---
来源：LearnMap · 学径（https://oplearnx.com）