NVIDIAは2026年6月3日(現地時間)、CVPRにおいて、自律走行車、ロボット、Vision AIシステムの研究開発を加速する新たな物理AIエージェントスキルを発表した。これらのスキルは、モデル開発を取り巻くワークフローの課題に対応し、NVIDIA Cosmos 3などのオープンモデルやシミュレーションフレームワークと連携して、スケーラブルなエンドツーエンドのワークフロー構築を支援する。
NVIDIAが今回発表した物理AIエージェントスキルは、研究者がリアルなシーンの再構築、エッジケースシナリオの生成、ポリシーのトレーニング、行動評価、迅速な反復といったプロセスを効率化できるように設計されている。
自律走行車向け
AIエージェントがフリートデータからのシーン再構築や合成シナリオ生成を自動化する。NVIDIA Omniverse NuRec、InstantNuRec、Harmonizer、HiGSといった技術が再構築を加速し、シーンのリアリズムを高める。オープンソースの強化学習フレームワークNVIDIA AlpaGymは、ポリシーのロールアウトと高精度シミュレーションを連携させ、数千のGPUにスケーリングする。また、NVIDIA Alpamayo 2 Superは、レベル4の開発と展開を支援するオープンな320億パラメータのVLAモデルである。
Vision AIシステム向け
NVIDIA Metropolisスキルが、異常検知、データ拡張、擬似ラベリングのための合成視覚シナリオ生成をAIエージェントで実現する。Defect Image Generationスキルは、リアルな画像から多様な欠陥例を作成し、NVIDIA Isaac Sim、Cosmos 3、NVIDIA OSMOと組み合わせて使用される。NVIDIA Metropolis VSS Blueprint、NVIDIA TAO、Video Augmentationスキルは、大量のビデオデータから洞察を抽出し、モデルのファインチューニングやビルド・評価ループの自動化を支援する。
ロボット学習向け
NVIDIA roboticsスキルが、シーン準備、シミュレーション、ロボット学習における一般的な開発ステップをAIエージェントで自動化する。NVIDIA Omniverseライブラリ、Isaac Sim、Isaac Labフレームワークを活用し、シミュレーションセッションの起動、シーンオーサリング、データキャプチャ、環境検証を支援する。Isaac mobilityスキルはナビゲーションワークフローをサポートし、Cosmos-H-Surgical-Simulatorは外科手術ロボットのリアルなデータ生成を通じて研究を進める。
参考: NVIDIA Blog (AI) — 2026年6月4日 00:00 (JST)