NVIDIAは2026年7月24日(現地時間)、外科手術ロボット向けのリアルタイム生成シミュレーター「Cosmos-H-Dreams」を発表した。このシステムは、同社の既存モデル「Cosmos-H-Surgical-Simulator」の機能を蒸留し、単一のNVIDIA RTX PRO 6000 GPU上でインタラクティブな操作を可能にする。高速ストリーミング推論ライブラリ「FlashDreams」を通じて提供される。
「Cosmos-H-Dreams」は、約160フレーム/秒で動作し、人間または学習済みのポリシーがクローズドループで制御可能な環境を提供する。このモデルは、da Vinci Research Kit (dVRK) の卓上縫合に特化して開発された。
基盤となるCosmos-H-Surgical-Simulatorは、NVIDIA Cosmos-Predict2.5-2Bに基づき、Open-H-Embodimentデータセットで学習されたアクション条件付き世界基盤モデルである。新しいシステムは、教師モデルから生徒モデルへの訓練パイプラインを採用し、自己強制蒸留(self-forcing distillation)という手法を用いて、展開時のモデルと学習時のコンテキストのミスマッチを解消している。
NVIDIAは、CMR SurgicalおよびCambridge Consultantsと連携し、「Versius」外科医コントローラーとの統合を実証している。また、WebRTCを介したブラウザクライアントや、Meta QuestクライアントからのWebXRによる合成シーン表示など、複数のヒューマンマシンインターフェースに対応する。このシステムは、ユーザーの特定のエンボディメントに合わせて拡張できる設計となっている。
参考: Hugging Face Blog (アーカイブ) — 2026年7月24日 20:35 (JST)
原文ハイライト"Cosmos-H-Dreams , a real-time, action-conditioned generative simulator for surgical robotics."