跳到正文
原文
Google DeepMind·· 2026-08-27精选AI 评分67

Google DeepMind 试点首个双盲 AI 评测

Piloting the world's first double-blind AI evaluations

AI 导读

Google DeepMind 宣布开展首个针对专有前沿级 AI 模型的双盲评测,以防止模型提前接触测试题目。该项目与 Singapore AI Safety Institute、OpenMined、AVERI 和 MLCommons 合作,在隐私保护的加密环境中使用机密基准测试 Gemini Flash Lite。

推荐理由

文章说明加密环境如何把外部评测与模型后续优化隔离开,为理解 benchmark contamination 及其对评测可信度的影响提供了具体机制。

来源:Google DeepMind · deepmind.google