DishwasherBench——前沿模型能把碗碟装进洗碗机吗?
DishwasherBench – Can Frontier Models Stack a Dishwasher?
这是一个用于评测语言模型的 GitHub 项目:内置名为 Spotless 的洗碗机装载游戏,基于一台真实机器(Bosch SMV4HAX40G)的物理仿真,玩家在浏览器中按刚体物理装载 3D 物件,并按 Eco 50 程序模拟水流、污渍与洗涤剂作用,按洗干净的件数计分。项目强调装载结果确定可复现、每次对局都是可由他人重放验证的记录,人类通过浏览器游玩,模型通过 MCP 接口游玩。