論文の概要: GROME: GROunding Factorized MEmory into Video World Models
- arxiv url: http://arxiv.org/abs/2610.39812v2
- Date: Fri, 30 Oct 2026 13:16:34 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-11-02 22:05:31.43277
- Title: GROME: GROunding Factorized MEmory into Video World Models
- Title(参考訳): GROME:ビデオワールドモデルにファクトリーを組み込む
- Abstract要約: GROMEは、静的シーンと動的エンティティの両方にわたる長い水平コヒーレンスのためのビデオワールドモデルを拡張する、新しいファクタライズドメモリフレームワークである。
GROMEは3つの相乗的コンポーネントを介して動作する: 1) 静的動的ファクトリゼーションは、歴史的証拠を静的および動的コンポーネントに分離し、静的なシーン幾何学と動的エンティティ状態を別々に保存する; 2) ローカルメモリ検索は、空間的に整列された静的履歴を選択して、最新の動的エンティティ状態と共に幾何的ドリフトを排除し、時間的連続性を保証する; 3) トレーニング自由メモリ注入は、ファクタライズされたメモリを、そのネイティブな条件付け経路を介してビデオワールドモデルにシームレスに基底付ける。
- 参考スコア(独自算出の注目度): 51.92696407678947
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Long-horizon consistency is essential for video world models, yet it becomes difficult to maintain once observed content falls outside the context window. Existing memory mechanisms either retrieve history as implicit context, which remains constrained by context capacity and entangles static and dynamic information or consolidate history into explicit global representations, which struggle to model evolving dynamics and accumulate geometric errors. To overcome these limitations, we introduce GROME, a novel factorized memory framework that augments video world models for long-horizon coherence across both static scenes and dynamic entities. GROME operates via three synergistic components: 1) Static-Dynamic Factorization decouples historical evidence into static and dynamic components, preserving static scene geometry and dynamic entity states separately; 2) Local Memory Retrieval selects spatially aligned static history to eliminate geometric drift alongside the latest dynamic entity states to ensure temporal continuity; 3) Training-Free Memory Injection seamlessly grounds the factorized memory into video world models via their native conditioning pathways. Experiments on long-horizon revisit scenarios demonstrate that GROME substantially enhances scene persistence and dynamic entity fidelity over existing methods, all while preserving the visual quality and controllability of the frozen backbone without additional training. Beyond self-rollouts, GROME readily accommodates external observations as plug-and-play memory, unlocking flexible and controllable video continuation and scene exploration.
- Abstract(参考訳): ビデオワールドモデルには長い水平一貫性が不可欠であるが、観察されたコンテンツがコンテキストウィンドウの外に落ちてしまえば、メンテナンスが困難になる。
既存の記憶機構は、履歴を暗黙の文脈として取り出すが、これは文脈の容量に制約され続け、静的な情報や動的情報を絡み合わせるか、あるいは履歴を明示的なグローバルな表現にまとめる。
これらの制限を克服するために,静的シーンと動的エンティティの両方にわたる長水平コヒーレンスのためのビデオワールドモデルを拡張する,新しいファクタライズドメモリフレームワークであるGROMEを紹介した。
GROMEは3つの相乗的コンポーネントを介して動作する。
1)静的・動的因子化は、歴史的証拠を静的・動的構成要素に分離し、静的シーン形状と動的実体状態を別々に保存する。
2)局所記憶検索は,時間的連続性を確保するために,最新の動的実体状態とともに幾何的ドリフトを排除するために,空間的に整列した静的履歴を選択する。
3) 学習自由メモリインジェクションは, 要因化されたメモリを, ネイティブコンディショニング経路を介して, ビデオワールドモデルにシームレスに固定する。
長期にわたる再訪シナリオの実験では、GROMEは既存の手法よりもシーンの持続性と動的エンティティの忠実性を大幅に向上する一方で、凍結したバックボーンの視覚的品質と制御性を追加のトレーニングなしで維持することを示した。
自己ロールアウト以外にも、GROMEは外部観察をプラグアンドプレイメモリとして容易に対応し、フレキシブルで制御可能なビデオ継続とシーン探索をアンロックする。
関連論文リスト
- WorldMemBench: A Comprehensive Benchmark for Memory of Video World Models [90.8083571564046]
WorldMemBenchは、ビデオワールドモデルで世界記憶を評価するためのベンチマークである。
人間のアイデンティティと外観、オブジェクトの外観と幾何学、環境内容と幾何学の保持を通じて静的記憶を評価する。
外観と幾何学のメトリクスをイベント固有の評価と組み合わせ、ビデオの品質とカメラ追跡の精度を報告する。
論文 参考訳(メタデータ) (2026-10-13T18:59:56Z) - WorldDirector: Building Controllable World Simulators with Persistent Dynamic Memory [106.28234880163723]
WorldDirectorは、高度に制御可能なビデオワールドモデルフレームワークである。
我々のフレームワークは、視覚生成から意味的な動きのオーケストレーションを明示的に分離する。
長時間の視界外から再突入しても,動的実体の正確な視覚的アイデンティティを保たせることができた。
論文 参考訳(メタデータ) (2026-07-02T17:59:59Z) - Out of Sight but Not Out of Mind: Hybrid Memory for Dynamic Video World Models [56.44348799741838]
静的な背景の正確なアーキビストと動的対象の警戒トラッカーを同時に行うためにモデルを必要とする新しいパラダイムであるHybrid Memoryを導入する。
HM-Worldは、ハイブリッドメモリに特化した最初の大規模ビデオデータセットである。
また,メモリをトークンに圧縮し,時間的関連性に基づく検索機構を利用する専用メモリアーキテクチャHyDRAを提案する。
論文 参考訳(メタデータ) (2026-03-26T17:56:01Z) - Mem4D: Decoupling Static and Dynamic Memory for Dynamic Scene Reconstruction [17.587320705104343]
静的幾何学と動的運動のモデリングを分離する新しいフレームワークを提案する。
Mem4Dは、グローバルな整合性を持つ静的幾何学を同時に維持し、高忠実度で動的要素を再構成する。
論文 参考訳(メタデータ) (2025-08-11T12:23:31Z) - Video World Models with Long-term Spatial Memory [110.530715838396]
本稿では,ビデオワールドモデルの長期的整合性を高める新しい枠組みを提案する。
我々のフレームワークは、長期空間記憶から情報を保存・取得する機構を含んでいる。
評価の結果,関連するベースラインに比べて品質,一貫性,コンテキスト長が向上した。
論文 参考訳(メタデータ) (2025-06-05T17:42:34Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。