跳到正文
原文
Latent Space· Richard MacManus·· 5 天前AI 评分51

前沿模型能否看破视觉诱饵?Elorian 推出 DecoyCount 测试视觉推理能力

Can Frontier Models See Past a Decoy? Elorian Tests Visual Reasoning

AI 导读

Elorian 联合 Mercor 推出 DecoyCount 评测基准,专门测试大模型是在真实计数物体还是依赖视觉捷径。评测显示前沿模型在该基准上的准确率均低于 50%(最高为 GPT-6 Astra 的 43.17%),而 Elorian 新推出的视觉推理模型 Glimpse 内部单次测试准确率达 50.48%。

来源:Latent Space · latent.space