Tag
3 件の関連記事
arXiv cs.CLは2026年9月10日(現地時間)、論文「The Cost of Compression: A Rate-Distortion Limit on Factual Hallucination」を発表した。この研究は、閉鎖型質問応答 (closed-book question answering) における事実の幻覚が、情報の圧縮に起因する歪みによって生じる可能性を指摘する。従来の説とは異なり、モデル内部に事実が存在しても有限メモリによって近似的に保存される場合にエラーが発生する機構を提示する。
arXiv cs.CVは9月4日(現地時間)、Vision Transformer (ViT) モデルの軽量化に関する研究論文を発表した。この研究は、インドの主要作物であるトウガラシ (Capsicum annuum) の病害を高精度に検出することを目的としており、リソースに制約のある農業現場デバイスへの適用を目指す。
arXiv cs.CLが2026年6月1日(現地時間)付けで報じたところによると、大規模言語モデル（LLM）の学習後圧縮に関する新たな研究論文が公開された。エリア・クネガッティ (Elia Cunegatti) 氏らは、既存の圧縮手法が持つ「フルレイヤー粒度」と「連続選択」という設計上の制約は過度に制限的であると指摘。この課題を克服するため、サブモジュールレベルでの圧縮を可能にする新手法「SubFit (Submodule-level Fitted residual replacement)」を導入した。