論文の概要: Topology-Aware 4D Gaussian Splatting for Egocentric Videos
- arxiv url: http://arxiv.org/abs/2611.16012v1
- Date: Wed, 11 Nov 2026 21:13:08 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-11-14 01:36:33.273951
- Title: Topology-Aware 4D Gaussian Splatting for Egocentric Videos
- Title(参考訳): エゴセントリックビデオのためのトポロジーを考慮した4次元ガウス散乱
- Abstract要約: TopoEgoは、エゴ中心ビデオのトポロジカルな変化に特化した最初のベンチマークである。
Topo-4DGSはトポロジカルな再構成手法である。
Topo-4DGSは、トポロジカルな変化にまたがって最先端の4DGSアプローチを著しく上回っている。
- 参考スコア(独自算出の注目度): 47.37030134726816
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Reconstructing dynamic scenes and objects from monocular egocentric video is crucial for embodied AI, yet existing 4D Gaussian Splatting (4DGS) approaches struggle with everyday interactions involving topological changes, such as cutting, assembly, opening, or closing. Since 4DGS methods rely on deforming a fixed representation, events that split, merge, or reveal surfaces cause severe visual artifacts. To address this challenge, we introduce TopoEgo, the first benchmark dedicated to topological changes in egocentric video (covering fission, fusion, open, and close), alongside Topo-4DGS, a topology-aware reconstruction method. Topo4DGS jointly models part-level motion and time-varying surface support by assigning independent rigid transformations to interacting parts and dynamically activating or deactivating Gaussians as surfaces appear, disappear, or separate. Extensive experiments demonstrate that Topo-4DGS significantly outperforms state-of-the-art 4DGS approaches across topological changes, especially on post-event frames. Code and data will be made publicly available.
- Abstract(参考訳): モノクロエゴシックビデオから動的シーンやオブジェクトを再構築することは、AIを具現化する上では不可欠だが、既存の4Dガウス・スプラッティング(4DGS)アプローチは、切断、組み立て、開口、閉鎖といったトポロジ的変化を含む日常的な相互作用に苦慮している。
4DGS法は固定表現の変形に依存しているため、分割、マージ、または表面の露光といったイベントは深刻な視覚的アーティファクトを引き起こす。
この課題に対処するために、トポ4DGSとともに、エゴ中心ビデオ(核分裂、核融合、オープン、クローズを含む)のトポロジカルな変化に焦点を当てた最初のベンチマークであるTopoEgoを紹介した。
Topo4DGSは、相互作用する部分に独立した剛体変換を割り当て、表面としてガウスを動的に活性化または非活性化することにより、部分レベルの動きと時間変化の表面支持を共同でモデル化する。
Topo-4DGSはトポロジカルな変化、特にポストイベントフレームにおいて、最先端の4DGSアプローチを著しく上回っている。
コードとデータは公開されます。
関連論文リスト
- Gnomon4D: Learning Where and When to Focus for Geometric Motion-Grounded World-Action Modeling [54.397433718845654]
Gnomon4Dは未来のビデオ、ロボットアクションを共同で生成するWAMであり、GeoDeltaはビデオアラインな4D幾何運動場である。
1つのフィールドのエンボディメントとオブジェクトによって、相互作用を示す相対的な動きを読み取ることができる。
Gnomon4DはRoboTwin2.0、VLABench、RoboDojoをリードし、実際のロボットベースラインを上回っている。
論文 参考訳(メタデータ) (2026-11-02T03:45:07Z) - Joint 3D Geometry Reconstruction and Motion Generation for 4D Synthesis from a Single Image [88.71287865590273]
そこでTrajScene-60Kについて紹介する。
拡散型4次元シーン軌道生成装置(4D-STraG)を提案する。
次に、4Dポイントトラック表現から任意のカメラトラジェクトリでビデオをレンダリングする4Dビュー合成モジュール(4D-Vi)を提案する。
論文 参考訳(メタデータ) (2025-12-04T17:59:10Z) - SyncMV4D: Synchronized Multi-view Joint Diffusion of Appearance and Motion for Hand-Object Interaction Synthesis [47.61773799705708]
同期多視点HOIビデオと4Dモーションを共同生成する最初のモデルであるSyncMV4Dを紹介する。
本手法は,視覚リアリズム,運動可視性,多視点整合性において,最先端の代替手段よりも優れた性能を示す。
論文 参考訳(メタデータ) (2025-11-24T17:14:19Z) - 4D Gaussian Splatting: Modeling Dynamic Scenes with Native 4D Primitives [115.67081491747943]
動的3Dシーン表現と新しいビュー合成はAR/VRおよびメタバースアプリケーションの実現に不可欠である。
我々は,その基礎となる4次元体積を近似として,時間変化の異なる3次元シーンの再構成を再構成する。
ストレージのボトルネックに対処するため、メモリフットプリントを効果的に削減するいくつかのコンパクトなバリエーションを導出する。
論文 参考訳(メタデータ) (2024-12-30T05:30:26Z) - 4DRecons: 4D Neural Implicit Deformable Objects Reconstruction from a single RGB-D Camera with Geometrical and Topological Regularizations [35.161541396566705]
4DReconsは出力を4Dの暗黙の表面としてエンコードする。
4DReconsは大きな変形や複雑な部品間相互作用を処理可能であることを示す。
論文 参考訳(メタデータ) (2024-06-14T16:38:00Z) - SC4D: Sparse-Controlled Video-to-4D Generation and Motion Transfer [57.506654943449796]
動作と外観を分離するSC4Dという,効率的でスパース制御されたビデオ・ツー・4Dフレームワークを提案する。
我々の手法は、品質と効率の両面で既存の手法を超越している。
動作を多種多様な4Dエンティティにシームレスに転送する新しいアプリケーションを考案する。
論文 参考訳(メタデータ) (2024-04-04T18:05:18Z) - 4DComplete: Non-Rigid Motion Estimation Beyond the Observable Surface [7.637832293935966]
観測されていないジオメトリの非剛体運動を推定する新しいデータ駆動アプローチである4DCompleteを紹介します。
ネットワークトレーニングのために,DeformingThings4Dという大規模合成データセットを構築した。
論文 参考訳(メタデータ) (2021-05-05T07:39:12Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。