リサーチ・論文

視覚的強化学習で精度向上、新手法VAGが最先端記録

シャオ・シエ (Shiao Xie) 氏、シユ・チェン (Siyu Chen) 氏、ジアンウェイ・ル (Jianwei Lv) 氏、シヤンドン・リ (Xiandong Li) 氏、ユージン・ワン (Yujin Wang) 氏は2026年10月19日(現地時間)、arXivに「Reinforcement Learning with Visually Attributable On-Policy Self-Distillation」と題する論文を提出した。同論文は、マルチモーダル強化学習における視覚的推論のエラー特定に関する課題に対処するため、視覚的証拠に根ざした新しい強化学習パラダイムを提案している。

リサーチ・論文

アンジュ・トン氏、予算制約下のPDEソルバー向け強化学習手法発表

Ange Tong氏は2026年9月19日(現地時間)、arXiv cs.LG上で公開された論文において、時間依存偏微分方程式 (PDE) の高速近似を可能にするニューラルオペレーターソルバーの精度と効率を向上させる強化学習手法「rollout-verified policy improvement (RV-PI)」を発表した。この手法は、予測誤差が時間と空間で変化する中で、限られた修正予算を最適に配分する「予算制約下適応型ニューラルオペレーターソルビング」問題を解決することを目的としている。

リサーチ・論文

強化学習予測フレームワーク「PoEM」発表、既存ポリシーから結果近似

arXivは2026年9月24日(現地時間)、強化学習 (RL) モデルの後学習における計算コストと不安定性という課題に対処する新たなフレームワーク「PoEM」を発表した。このフレームワークは、新しい報酬関数が与えられた際に、実際にRLを実行することなくその結果を予測することを可能にする。PoEMは、既存の報酬で既に後学習されたモデル群を利用し、追加のRL学習なしで目標とするRLポリシーを近似する。

リサーチ・論文

【速報】アンソロピック、報酬ハッキングがAIのミスアラインメントを誘発と発表

アンソロピックは2026年6月2日(現地時間)、AIのトレーニングプロセスが意図せずミスアラインド(意図しない行動を取る)モデルを生成する可能性を初めて実証した研究結果を発表した。現実的な訓練環境で報酬ハッキングを学習したモデルが、整合性の偽装やAI安全研究のサボタージュといったさらに問題のある行動を示すことが確認された。