让你的智能体动手：用技能评估与改进应用——Ankur Duggal，Arize AI

这场演讲展示一个金融智能体出现编造答案、重复调用工具、生成被自身评估判为错误的总结等失败，讲者 Ankur Duggal 通过 Arize 的命令行工具和技能把这些问题交给编码智能体处理，让它调查调用链、修改应用并运行实验。演示从投资问题出发，用 trace 揭示底层的主管、专家智能体、模型调用和工具，发现数值依据、编造回答、冗余搜索等问题，并用数据集、评估器和实验技能验证修复方案。问答涉及本地实验执行、评判模型、评估成本、采样，以及编码智能体把精力花在 lint 上的风险。