Google、Android BenchのLLM評価刷新 Harborフレームワーク導入
Googleは7月8日(現地時間)、Android開発向け大規模言語モデル (LLM) リーダーボード「アンドロイドベンチ (Android Bench)」の評価方法論を「ハーバーフレームワーク (Harbor framework)」へ移行したと発表した。これにより、全てのモデルが新しい基準で再評価され、8つの新規モデルがリーダーボードに追加された。最新のスコアリングでは、クロード フェイブル 5 (Claude Fable 5) が84.5のスコアで首位を獲得した。