跳到正文
原文
Google DeepMind·· 2026-08-27精选AI 评分60

Google DeepMind 试点双盲 AI 评测机制

Piloting the world's first double-blind AI evaluations

AI 导读

Google DeepMind 联合新加坡 AI 安全局、OpenMined、AVERI 与 MLCommons 试点双盲 AI 评测机制,以解决基准测试污染问题。该方案将测试置于加密隐私保护环境中运行 Gemini Flash Lite 模型,确保专有前沿模型无法提前接触外部评测提示词,防止人为拉高跑分并提升评测可信度。

推荐理由

原文介绍了利用加密环境隔绝基准测试题目的机制,为解决大模型评测污染和分数虚高提供了具体方案。

来源:Google DeepMind · deepmind.google