Sy-Tuyen Ho氏らの研究チームは2026年10月22日(現地時間)、Text-to-Image(T2I)モデルのデータセット使用監査に関する新手法「スペクトラルカナリア(SpectralCanary)」を発表した。この手法は、低周波数帯域の視覚信号をデータセットに埋め込み、モデルが特定の画像コレクションでファインチューニングされたかを効率的に検出するもので、従来の監査手法が抱えていたトレードオフの課題解決に貢献する。
スペクトラルカナリアは、スムーズなローパスフィルター(low-pass mask)を用いて固定のカナリア画像を各コレクション画像にブレンドし、キャプションには変更を加えない方式を採用している。その後、軽量な検証器がモデル生成出力に転送された信号を検出する。これまでの監査手法は、検証可能性、忠実性、堅牢性、展開可能性の間でトレードオフを抱えることが課題とされてきた。
研究チームは、ポケモンデータセットと3種類のデータ変換を用いた8つのテストにおいて、評価された手法の中で最高の平均生成ごとのTPR@1% FPR(91.1%)と、30世代を用いた固定閾値モデルレベル精度(94.8%)を達成した。また、SD3.5を用いて芸術、医療、衛星、ファッションの5つのデータセットで評価したところ、スペクトラルカナリアは平均92.4%の生成ごとのTPR@1% FPRを示した。同時に、リリースされた画像の品質はSSIM 0.989、LPIPS 0.022で維持され、平均ΔFIDは0.05とほぼゼロであった。
さらに、ポケモンとROCOv2データセットでのマッチドエナジーアブレーション(matched-energy ablations)により、中周波数や高周波数への配置と比較して、低周波数への配置がより信頼性の高い転送を示すことが裏付けられた。評価された適応型攻撃下では、最も効果的な信号除去には25ΔFIDポイントを超える積極的な変更が必要であることも判明した。これらの結果は、低周波数視覚信号がコレクションレベルのT2I監査トレースの効果的な担い手であることを示唆している。
参考: arXiv cs.CV — 2026年10月23日 02:59 (JST)
原文ハイライト"SpectralCanary: Embarrassingly Simple Low-Frequency Traces for T2I Dataset-Use Auditing"