Google DeepMind·· 2026-08-27精选AI 评分60
Google DeepMind 试点双盲 AI 评测机制
Piloting the world's first double-blind AI evaluations
AI 导读
Google DeepMind 联合新加坡 AI 安全局、OpenMined、AVERI 与 MLCommons 试点双盲 AI 评测机制,以解决基准测试污染问题。该方案将测试置于加密隐私保护环境中运行 Gemini Flash Lite 模型,确保专有前沿模型无法提前接触外部评测提示词,防止人为拉高跑分并提升评测可信度。
推荐理由
原文介绍了利用加密环境隔绝基准测试题目的机制,为解决大模型评测污染和分数虚高提供了具体方案。
来源:Google DeepMind · deepmind.google