Latent Space· Richard MacManus·· 5 天前AI 评分49
Elorian 发布视觉推理模型 Glimpse 与 DecoyCount 基准,前沿模型准确率不足 50%
Can Frontier Models See Past a Decoy? Elorian Tests Visual Reasoning
AI 导读
Elorian 推出视觉推理模型 Glimpse,并联合 Mercor 发布 DecoyCount 基准,测试模型是真计数还是依赖视觉捷径。论文中前沿模型准确率均低于 50%,最高的 GPT-6 Astra 为 43.17%,Glimpse 内部测试得分 50.48%,是唯一超过 50% 的模型。
来源:Latent Space · latent.space