学術論文公開サイトarXiv cs.CVは2026年11月4日(現地時間)、Zhihao Tang氏らが開発した新規視点合成技術「T$^2$-Splat (ティースクエア スプラット)」に関する論文を公開しました。T$^2$-Splatは、メッシュのトポロジー適応と外観の洗練という2つの要素を分離することで、グラフィックスパイプラインにおける過剰なテッセレーション(細分化)の必要性を低減します。この手法は、コンパクトなメッシュ構造を維持しつつ、視覚的なディテールを効果的に保持することを可能にします。

この研究は、Zhihao Tang氏、Youjia Zhang氏、Mingbo Zhao氏、Wei Yang氏の4名の研究者によって発表されました。従来の三角ベースのスプラッティング技術は、対象物の外観における細かなディテールを維持するために、大量の三角形による過剰なテッセレーションを必要とすることが大きな課題となっていました。これにより、データ量が著しく増大し、レンダリング(描画)の計算負荷が高まるという問題が生じていました。

T$^2$-Splatは、この課題に対し、まずメッシュ接続性の初期化にSafe Restricted Delaunay Triangulation (セーフ レストリクテッド デローニー トライアンギュレーション、Safe RDT)という手法を採用します。この技術は、視点合成の初期段階で安定かつ効率的なメッシュ構造を構築することを目的としています。次に、構築されたメッシュのトポロジーを動的に適応させるために、Dynamic Topology Evolution (ダイナミック トポロジー エボリューション、DTE)が導入されています。DTEは、エッジの縮約や頂点の分割といった操作を通じて、シーンの複雑さや視覚的な重要度に応じて三角形の割り当てを柔軟に調整します。これにより、必要な箇所にのみ詳細なメッシュを割り当て、不要な箇所ではメッシュを簡素化することが可能となり、メッシュの効率的な利用が図られます。

固定されたメッシュ構造上では、視覚的な外観を洗練させるために、Residual Per-Face MIP-Textures (レジデュアル パーフェイス ミップ テクスチャ)が活用されます。この手法は、スケール適応フィルタリングと組み合わされることで、異なる解像度や距離からの視点に対しても一貫性のある高品質なテクスチャ表現を実現します。特に、メッシュで表現しきれない細かなディテールや高周波成分を、残差(Residual)としてテクスチャに格納することで、メッシュの粗さに起因する視覚的な情報の欠落を防ぎ、高品質なレンダリングを可能にします。

Mip-NeRF 360 (ミップナーフ 360)Tanks & Temples (タンクス & テンプルズ)「DTU (ディーティーユー)」などの複数のデータセットを用いた実験では、T$^2$-Splatが非常にコンパクトなメッシュを使用しながらも、既存の手法と比較して競争力のある優れた結果を示しました。特にMip-NeRF 360のデータセットでは、既存のMeshSplatting (メッシュスプラッティング)と比較して、画質の客観的評価指標であるPSNR(ピーク信号対雑音比)を0.71dB向上させることに成功しました。また、追加の圧縮実験では、元のフェイス数のわずか10%にまでフェイスバジェット(メッシュの面数予算)を削減した場合でも、視覚品質を大きく損なうことなく、メッシュの複雑さを柔軟に制御できることが実証されました。これにより、メモリ効率の向上や、リアルタイムレンダリングへの応用可能性が示唆されています。本研究は、計算機科学の権威ある会議NeurIPS (ニューリップス) 2026で採択されています。


参考: arXiv cs.CV — 2026年11月6日 14:00 (JST)

この記事をシェア
X はてブ LinkedIn