Google DeepMind·· 2026-08-27精选AI 评分62
Google DeepMind 推出全球首个双盲 AI 评估,用加密环境测试 Gemini Flash Lite
Piloting the world's first double-blind AI evaluations
AI 导读
Google DeepMind 推出全球首个针对专有前沿模型的双盲评估,将外部评估限制在加密“盒子”中,防止模型提前看到测试题。该评估与新加坡 AI 安全研究所、OpenMined、AVERI 和 MLCommons 合作,在隐私保护环境中用保密基准测试 Gemini Flash Lite 模型,以提升评估完整性。
推荐理由
原文介绍了双盲评估机制的原理和合作方,读者可据此理解它如何缓解基准污染问题。
来源:Google DeepMind · deepmind.google