Googleは2026年8月27日(現地時間)、独自のフロンティアAIモデルを対象とした二重盲検評価を開始した。これは世界初の試みで、シンガポールAI安全研究所 (Singapore AI Safety Institute)、OpenMined、AVERI、MLCommonsと提携し、モデルが評価用データを事前に参照できない暗号化された環境でテストを実施する。評価の信頼性向上を目指す。
Googleは、高度なAIモデルの評価において業界が直面する課題、すなわちモデルがテストデータを事前に参照してしまう「ベンチマーク汚染」の問題に対処するため、この新しい評価手法を導入したと発表した。この二重盲検評価では、Google CloudのConfidential Computingポートフォリオ内のConfidential Spaceを利用する。
この仕組みにより、外部評価者はGemini Flash Liteモデルのウェイトにアクセスできず、Google側も評価者が用意したテストプロンプトを参照できない。データがそれぞれの所有者にプライベートな状態を保つことで、ベンチマーク汚染を防ぎ、機密データを保護する。これにより、独立した組織がデータの主権やセキュリティを損なうことなく、高度なモデルを厳密にテストする能力が解放される。
Googleは、このパイロットがサイバーセキュリティや政府機関による評価のような特に機密性の高い分野において、モデル監視の新たなフロンティアを確立し、より安全で信頼性の高いAIシステムの構築に寄与する見通しだとの考えを示した。
参考: DeepMind Blog (アーカイブ) — 2026年8月27日 23:00 (JST)
原文ハイライト"Piloting the world's first double-blind AI evaluations"