論文の概要: Pantheon360: Taming Digital Twin Generation via 3D-Aware 360° Video Diffusion
- arxiv url: http://arxiv.org/abs/2605.25449v1
- Date: Mon, 25 May 2026 06:00:01 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-26 19:50:19.336204
- Title: Pantheon360: Taming Digital Twin Generation via 3D-Aware 360° Video Diffusion
- Title(参考訳): Pantheon360: 3D-Aware 360°ビデオ拡散によるデジタル双極子生成
- Authors: Ting-Hsuan Chen, Ying-Huan Chen, Tao Tu, Jie-Ying Lee, Cho-Ying Wu, Fangzhou Lin, Hengyuan Zhang, David Paz, Xinyu Huang, Yuliang Guo, Yu-Lun Liu, Yue Wang, Liu Ren,
- Abstract要約: 3D-Aware 360 Video DiffusionによるPantheon360: Taming Digital Twin Generationを紹介する。
キーとなるアイデアは、ユーザが定義した任意のカメラパスの幾何学的な足場として機能する、入力から再構築された明示的な3Dキャッシュである。
実験により、パンテオン360は優れた視覚的品質と未整合幾何学的コヒーレンスを達成することが示された。
- 参考スコア(独自算出の注目度): 28.780606702499444
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Generating complete digital twins from videos requires precise camera control, global scene coverage, and strict spatial-temporal consistency constraints that remain challenging for perspective video generators due to their limited field of view (FoV). Their narrow FoV forces long or multi-view trajectories, amplifying cross-view inconsistency and temporal drift. We argue that 360° video generation offers a natural solution: panoramic coverage simplifies trajectory design and provides a strong global context for maintaining coherence. We introduce Pantheon360: Taming Digital Twin Generation via 3D-Aware 360° Video Diffusion, a controllable 360° video generation framework that synthesizes high-fidelity videos from sparse 360° inputs. The key idea is an explicit 3D Cache, reconstructed from the input, which serves as a geometric scaffold for any user-defined camera path. This allows the diffusion model to focus on photorealistic texture refinement while the 3D Cache enforces global geometric consistency. Experiments show that Pantheon360 achieves superior visual quality and unmatched geometric coherence, enabling reliable and flexible 360° scene generation for downstream simulation and digital-twin applications.
- Abstract(参考訳): ビデオから完全なデジタルツインを生成するには、カメラの正確な制御、グローバルシーンのカバレッジ、厳密な空間的時間的一貫性の制約が必要である。
彼らの狭いFoVは、長いまたは多視点の軌道を強制し、横方向の不整合と時間的ドリフトを増幅する。
パノラマカバレッジは軌道設計を単純化し、コヒーレンスを維持するための強力なグローバルなコンテキストを提供する。
3D-Aware 360° Video DiffusionによるPantheon360: Taming Digital Twin Generationを紹介した。
キーとなるアイデアは、ユーザが定義した任意のカメラパスの幾何学的な足場として機能する、入力から再構築された明示的な3Dキャッシュである。
これにより拡散モデルはフォトリアリスティックなテクスチャ改善に集中でき、3Dキャッシュはグローバルな幾何学的一貫性を強制する。
実験により、Panteon360は優れた視覚的品質と不整合の幾何コヒーレンスを実現し、下流シミュレーションとデジタルツインアプリケーションのための信頼性とフレキシブルな360度シーン生成を可能にした。
関連論文リスト
- 360Anything: Geometry-Free Lifting of Images and Videos to 360° [51.50120114305155]
既存のアプローチは、パースペクティブと等方射影空間の間の明示的な幾何学的アライメントに依存している。
事前学習した拡散変換器上に構築された幾何学的自由度フレームワークである360Anythingを提案する。
提案手法は,映像と映像の視点-360生成における最先端性能を実現する。
論文 参考訳(メタデータ) (2026-01-22T18:45:59Z) - PanoWorld-X: Generating Explorable Panoramic Worlds via Sphere-Aware Video Diffusion [87.13016347332943]
PanoWorld-Xは、多彩なカメラ軌道を持つ高忠実で制御可能なパノラマビデオ生成のための新しいフレームワークである。
動作範囲,制御精度,視覚的品質など,様々な面で優れた性能を示す実験を行った。
論文 参考訳(メタデータ) (2025-09-29T16:22:00Z) - Beyond the Frame: Generating 360° Panoramic Videos from Perspective Videos [64.10180665546237]
360degのビデオは、私たちの周囲のより完全な視点を提供する。
既存のビデオモデルは、標準的なビデオを作るのに優れているが、完全なパノラマビデオを生成する能力は、まだ明らかになっていない。
高品質なデータフィルタリングパイプラインを開発し、双方向のトレーニングデータをキュレートし、360度ビデオ生成の品質を向上させる。
実験結果から,本モデルでは実写的でコヒーレントな360デグ映像を撮影できることが示された。
論文 参考訳(メタデータ) (2025-04-10T17:51:38Z) - Generating 360° Video is What You Need For a 3D Scene [31.11172135139431]
中間シーン表現として360degビデオを利用する実用的でスケーラブルなソリューションを提案する。
テキストプロンプトから3Dシーンを合成する生成パイプラインであるWorldPrompterを提案する。
WorldPrompterには条件付き360度パノラマビデオジェネレータが組み込まれており、仮想環境を歩いたり捉えたりする人をシミュレートする128フレームのビデオを生成することができる。
論文 参考訳(メタデータ) (2025-04-02T18:04:32Z) - DreamScene360: Unconstrained Text-to-3D Scene Generation with Panoramic Gaussian Splatting [56.101576795566324]
テキストから3D 360$circ$のシーン生成パイプラインを提示する。
提案手法は, 2次元拡散モデルの生成力を利用して, 自己複製を促進する。
当社の手法は,360ドル(約3万2000円)の視野内で,グローバルに一貫した3Dシーンを提供する。
論文 参考訳(メタデータ) (2024-04-10T10:46:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。