跳到正文
原文
量子位· 允中·· 4 小时前AI 评分59

UniPat AI发布PaperBenchX基准:GPT-6 Astra论文复现率仅13.98%

ChatGPT踢到铁板了!能破解千禧数学难题,但论文复现率低至13.98%?

AI 导读

UniPat AI发布了名为PaperBenchX的国际首个多学科端到端论文结果复现基准,涵盖电磁、化学等12个研究方向及3168条专家校验评分项。测评显示表现最强的GPT-6 Astra在93个真实论文复现任务中完整复现率仅为13.98%,表明当前大模型虽能解决部分数学难题,但在可靠重建科学工作流并生成可验证证据方面仍存在显著差距。

来源:量子位 · qbitai.com