Layaモデルの選択肢順序感度、回答に25.8%の影響
アーカイブ (arXiv) は11月6日(現地時間)、研究論文を公開し、ノンオートレグレッシブ意思決定モデル「Laya (Laya)」において、多肢選択問題の選択肢の提示順序がモデルの回答に大きな影響を与えることを発表した。Mohammed Nayeem Khan氏とLogesh L氏による「Maya a1」と題されたこの論文は、モデルのチェックポイントを再構築し、951のQwen検証済み質問を用いて順序の影響を詳細に調査。その結果、全質問の25.8%で回答が変化することが確認された。