Hugging Face Blog、LLMの科学アイデア新規性評価に課題と報告
Hugging Face Blogは2026年10月27日(現地時間)、アレン人工知能研究所 (Allen Institute for AI; Ai2) が発表した研究「Old Ideas, Novel Problems」について詳報した。この研究は、大規模言語モデル (LLM) が科学研究におけるアイデアの新規性を評価する際の信頼性について検証したものだ。Ai2は、新規性評価のためのベンチマーク、データ、コードに加え、自動評価セット構築パイプラインも公開しており、LLMによる評価の不安定性を指摘している。