小型言語モデル向け「MIITA」提案:リソース制約下での継続学習進化
arXivは2026年5月20日(現地時間)、リソースが限られた環境の小型言語モデル(SLMs)における継続学習(CL)での「壊滅的忘却」問題に対処する新フレームワーク「MIITA」に関する論文を公開した。MIITAは、限られたストレージで教師あり継続学習を実現し、SLMsが実世界の刻々と変化するニーズに適応するための重要な進化を支援する。この研究は、制約ある環境でSLMsが継続的に学習し、新しい情報を取り込むための新たな道筋を示す。