大規模ステップ勾配降下法、分類問題における自己安定化と収束率を統一解明
arXiv cs.LGは2026年11月12日(現地時間)、ニューラルネットワーク学習の核心である大規模ステップ勾配降下法(GD)に関する新たな研究論文を発表した。同研究は、従来の理論では不十分だった古典的な安定性閾値を超えるステップサイズにおけるGDの自己安定化メカニズムと収束率を、統一的な視点から解明することに成功。特に分類設定における課題を克服し、新しい幾何学的視点と、多様体の役割を代替する参照部分空間を導入した。
Tag
1 件の関連記事