Google DeepMind·· 2026-08-27
Google DeepMind 试点全球首个双盲 AI 评测
Piloting the world's first double-blind AI evaluations
SI 导读
Google DeepMind 宣布推出全球首个针对专有前沿级 AI 模型的双盲评测,将外部评测限制在密码学环境中,防止模型提前接触测试题目以优化性能。该试点与新加坡 AI 安全研究所、OpenMined、AVERI 和 MLCommons 合作,在隐私保护环境下用保密基准测试 Gemini Flash Lite 模型,以提升评测可信度。
精选SI 评分60
推荐理由
Google DeepMind 联合新加坡 AI 安全研究所等机构,用密码学环境对 Gemini Flash Lite 做双盲评测,读者可了解基准污染问题的技术解法。
来源:Google DeepMind · deepmind.google