Latent Space· Richard MacManus·· 4 天前AI 评分47
Elorian 的 DecoyCount 评测显示,前沿模型计数准确率均低于 50%
Can Frontier Models See Past a Decoy? Elorian Tests Visual Reasoning
AI 导读
Elorian 与 AI 数据公司 Mercor 联合发布 DecoyCount 视觉推理基准,用于测试语言模型能否真正计数,而非依赖视觉捷径与替代启发式。配套论文显示,前沿模型准确率均低于 50%,最高为 GPT-6 Astra 的 43.17%,Glimpse 未列入论文。
来源:Latent Space · latent.space