リサーチ・論文

arXiv論文、情報圧縮が大規模言語モデルの幻覚メカニズムを解明

arXiv cs.CLは2026年9月10日(現地時間)、論文「The Cost of Compression: A Rate-Distortion Limit on Factual Hallucination」を発表した。この研究は、閉鎖型質問応答 (closed-book question answering) における事実の幻覚が、情報の圧縮に起因する歪みによって生じる可能性を指摘する。従来の説とは異なり、モデル内部に事実が存在しても有限メモリによって近似的に保存される場合にエラーが発生する機構を提示する。

リサーチ・論文

コンピューター利用履歴からタスクモデルを自動誘導、複雑な日常業務解析する新手法「TMI」を発表

Yucheng Jiang氏、Zora Zhiruo Wang氏、Ruishi Chen氏、Diyi Yang氏らの研究者グループは8月20日(現地時間)、コンピューター利用履歴からタスクモデルを誘導する新手法「Task Model Induction (TMI)」を発表した。TMIは、スクリーンショットやマウス、キーボード操作といった受動的に記録された自然なコンピューター利用履歴から、日常業務がどのように行われるかのモデルを導出することを目指している。これは、従来のタスクモデル誘導手法が抱える特定のタスク前提や構造化されたタスクモデルの欠如といった課題を克服し、未制約の利用履歴から潜在的なタスクを自律的に発見・分離する画期的なアプローチを示している。

リサーチ・論文

言語モデルの内部に文法性の暗黙的区別が存在か 研究論文が発表

学術論文リポジトリ「arXiv cs.CL」が2026年5月6日(現地時間)付けで報じたところによると、事前学習済み言語モデル (LMs) が文法性に関して文字列の尤度とは異なる暗黙的な区別を獲得している可能性が示された。研究者らは線形プローブを用いた内部表現の分析を通じて、この文法性の区別が人間が作成したベンチマークや複数の言語において、尤度に基づく判断を上回る性能を示すことを発見した。

リサーチ・論文

LLM「幻覚」検出、新手法「ファーストトークン信頼度」が低コストで高精度

arXiv cs.CLは5月6日(現地時間)、Mina Gabriel氏による研究論文が、大規模言語モデルにおける「幻覚」(Hallucination)検出の新たな手法「ファーストトークン信頼度 (phi_first)」の有効性を示したと報じた。この手法は、単一のグリーディデコードにおける最初の内容を持つ回答トークンの上位Kロジットの正規化エントロピーから算出される。従来のサンプリングベースの手法と比較し、低コストで同等以上の性能を発揮することが明らかになった。