ChatGPT 论文复现率低至 13.98%
来自 量子位 · 期号 2026-10-08
摘要
AI 在解数学题上很强,但复现论文结果却不行。 一项新基准 PaperBenchX 专门测试 AI 的科研能力,要求模型复现数学论文中的核心结果。ChatGPT 的复现率仅为 13.98%,远低于其在解题类基准上的表现。 这说明,能解题不等于能做科研。PaperBenchX 这类基准或许能更好地衡量 AI 的真实科研实力。
来自 量子位 · 期号 2026-10-08
AI 在解数学题上很强,但复现论文结果却不行。 一项新基准 PaperBenchX 专门测试 AI 的科研能力,要求模型复现数学论文中的核心结果。ChatGPT 的复现率仅为 13.98%,远低于其在解题类基准上的表现。 这说明,能解题不等于能做科研。PaperBenchX 这类基准或许能更好地衡量 AI 的真实科研实力。
本站只做摘要与索引,全部内容版权归原作者所有。