Google DeepMind·· 2026-08-27精选AI 评分67
Google DeepMind 试点首个双盲 AI 评测
Piloting the world's first double-blind AI evaluations
AI 导读
Google DeepMind 宣布开展首个针对专有前沿级 AI 模型的双盲评测,以防止模型提前接触测试题目。该项目与 Singapore AI Safety Institute、OpenMined、AVERI 和 MLCommons 合作,在隐私保护的加密环境中使用机密基准测试 Gemini Flash Lite。
推荐理由
文章说明加密环境如何把外部评测与模型后续优化隔离开,为理解 benchmark contamination 及其对评测可信度的影响提供了具体机制。
来源:Google DeepMind · deepmind.google