Microsoftは2026年10月30日(現地時間)、Microsoft Copilotの企業向け大規模評価を可能にする「Industry Evaluation Data Generation Platform」を開発したと発表した。このプラットフォームは、機密情報を含む実際の顧客データを用いることなく、現実の組織構造やワークフローを模倣した合成企業環境を活用し、AIシステムの機能と安全性、プライバシー保護を検証する。
Microsoft Copilotは、ドキュメント作成や会議要約、情報検索といった業務に利用されている。これらのAIシステムが意図通りに機能しているかを評価するため、同社は体系的な評価戦略を構築した。
Industry Evaluation Data Generation Platformは、3つの主要な柱に基づいている。一つ目は、顧客データを使用せずに現実的なユーザー、会議、メール、ドキュメント、組織構造をシミュレートする合成企業環境の構築である。二つ目は、評価データセットを迅速かつ再現可能に生成するための自動クエリ生成パイプライン。三つ目は、合成データが評価基準を満たすことを保証する構造化品質フレームワークである。
合成環境のリアリティを確保するため、同社は米労働省の職業データベースO*NETデータ、オンライン求人情報、SEC filingsといった公開されている実世界データ源を活用している。これにより、医薬品、資本市場、IT/ソフトウェア企業といった特定の業界に合わせた動的かつ時間とともに進化する組織のシミュレーションが可能になる。自動クエリ生成パイプラインは、一般的な職場タスクから業界固有の質問を生成し、Copilotの評価に利用される。
参考: Microsoft Research Blog — 2026年10月30日 22:05 (JST)
原文ハイライト"Evaluating Microsoft Copilot at enterprise scale requires test data that captures the full complexity"