arXivは2026年11月19日(現地時間)付けで、人間とオブジェクトの協調動作合成を目的とした拡散フレームワーク「CoRelate」に関する論文を公開した。同フレームワークは、明示的なインタラクション関係とタスクフィードバックを通じて、全身の人間とオブジェクトの動きを協調させる。これにより、オブジェクトの目標達成、接触維持、および完全なインタラクション成功度を向上させるとしている。

Zhiwen Qiu(ジウェン・チウ)氏らは、剛体および関節を持つオブジェクトに対し、人間とオブジェクトの協調動作合成を実現する「CoRelate」を導入した。従来の人間とオブジェクトの動作合成では、オブジェクトが目標に到達しても、接触の確立と維持が保証されないという課題があった。また、接触改善のための調整がタスクの完了を妨げる可能性も存在した。

CoRelateは、参加する手、そのパーツ相対参照位置、および参加間隔を指定する「手とパーツの関係」を通じて、意図された参加を表現する。これらの関係は、生成条件とインタラクション実現を測定するための参照の両方として機能する。各デノイジングステップにおいて、ジェネレーターと共同で訓練された一時的リファイナーが、関係偏差、タスク残差、および現在の予測からのモーション特徴を結合し、シーケンス全体にわたって人間とオブジェクトのモーションを共同で更新する。

生成後には、一時的なモーション補正が残存する接触失敗に対処する。これは、オブジェクトの軌道と保護された人間のモーションを維持しながら、ローカルなモーションセグメントを最適化することで実施される。実験では、評価されたベースラインと比較して、オブジェクトの目標達成、接触F1スコア、および完全なインタラクション成功度の改善が示された。アブレーションスタディでは、関係コンディショニングと、タスクおよび関係フィードバックの補完的役割の利点が支持されている。


参考: arXiv cs.CV (アーカイブ) — 2026年11月20日 14:00 (JST)

原文ハイライト

"Human-object motion synthesis requires coordinated human participation as objects move toward specified goals."

この記事をシェア
X はてブ LinkedIn