更多帖子
帖子进阶

分享用独立对抗审查Agent做发现工作的方法

AI 导读

fofr 在 X 上列出一套做“发现类”工作的流程要点:让流水线能在盲测条件下复现已知结果,同时能拒绝已知的冒牌案例与仪器故障;不轻信自身结果,反复启动带有非诱导性提示的独立 Agent 做对抗式审查,并要求审查者从原始数据重新验证;每当审查发现问题,就尝试提炼成通用的技能或流程。适合用 AI Agent 做实验、数据探测或自动化研究工作的人关注。

分级
值得看
收录时间
2026-10-26

原帖

never trust your results, always spin up an independent agent with a non-leading prompt to do an adversarial review, do this repeatedly - have the reviewer re-verify from raw data

fofrAI · · 在 X 查看原帖(新标签页打开)

中文大意

发帖人 fofr 分享自己做发现类工作(文中举了用 Argon 找到一颗奇怪恒星 Gaia DR3 4582145718700356096:可见光下正常、类似太阳,但 2010 年 3 月在 22 微米深红外波段比预期亮约 60 倍)时的方法:让流程在盲测下复现已知结果;也要能拒斥已知的冒牌信号和仪器故障;不要相信自己的结果,反复启动用非引导性提示词的独立 agent 做对抗性审查;让审查者从原始数据重新验证;每当审查者发现问题,就从中提炼通用经验,沉淀成技能或流程。适合做数据发现、异常检测、用 agent 交叉验证结论的人阅读。

讨论区核心观点

依据 3 条评论

  • 补充建议:做流程校准时要用大样本(1 万以上)数据集,并在确认结果稀少时用 NASA batman 之类合成工具把信号注入真实数据中。
  • 认同“让第二个机器人检查第一个机器人的作业”这一做法,认为是当天听到最合理的建议。
  • “永远不要相信你的结果”是核心:有回复者把同一原则套用到 AI 图像上——先生成 20 张挑 1 张,再手工修过才给客户看。