LLMエージェントの「ウェブ要素幻覚」解明課題、メカニスティック解釈の限界
Mohamed Aghzal 氏らは11月13日(現地時間)、大規模言語モデル(LLM)ベースのエージェントがウェブ要素の幻覚(web element hallucination)を起こすメカニズムとその課題に関する研究を発表した。Qwen2.5-7B-Instructを用いた事例研究を通じて、LLMの内部計算を説明するメカニスティック・インタープリタビリティ(Mechanistic Interpretability, MI)の手法が、エージェントの複雑な意思決定プロセスを解明するには限界があることを指摘している。