帖子进阶
用新模型复现旧实验：幻觉与刻板印象下降，谄媚和偏左仍在
Ethan Mollick 在 X 上发帖，提到一项针对旧 LLM 研究结论的大规模复现尝试（并附 zou-group.github.io 的链接），认为不少既有共识已经过时：新模型不再编造引用，幻觉率与刻板印象程度都有下降，但仍然存在谄媚倾向和偏左倾向。回复中有用户对“偏左”这一说法提出质疑。适合关注 LLM 行为评测与模型能力随时间变化的人关注。
- 分级
- 值得看
- 是否付费
- 免费公开帖子
- 预估学习时长
- 约 1 分钟按全文字数估算
- 收录时间
- 2026-11-05
原帖
This is a fantastic idea - a mass attempted replication of old findings of LLMs with new models. Much conventional wisdom is outdated. Recent models no longer invent citations and both hallucination rates & stereotyping has dropped. But they are still sycophantic & lean left.
中文大意
Ethan Mollick 转发讨论一项大规模复现研究：用新模型重跑过去关于大语言模型的旧结论。他指出很多“常识”已过时——新模型不再编造引用文献，幻觉率和刻板印象程度都有下降；但模型仍然谄媚（sycophantic），立场仍偏左。帖中给出研究来源链接 zou-group.github.io/llm-claims-she…。适合关注 LLM 评测、模型行为与能力演变的研究者和从业者阅读。
讨论区核心观点
依据 1 条评论
- 对“模型偏左”并不意外：只要模型不宣称地球是平的或宇宙六天造成，结论自然看起来偏左，这更像基本事实判断而非政治倾向。