論文の概要: Omni-WorldBench: Towards a Comprehensive Interaction-Centric Evaluation for World Models
- arxiv url: http://arxiv.org/abs/2603.22212v1
- Date: Mon, 23 Mar 2026 17:10:29 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-03-24 19:11:39.80452
- Title: Omni-WorldBench: Towards a Comprehensive Interaction-Centric Evaluation for World Models
- Title(参考訳): Omni-WorldBench:世界モデルの総合的相互作用中心評価を目指して
- Authors: Meiqi Wu, Zhixin Cai, Fufangchen Zhao, Xiaokun Feng, Rujing Dang, Bingze Song, Ruitian Tian, Jiashu Zhu, Jiachen Lei, Hao Dou, Jing Tang, Lei Sun, Jiahong Wu, Xiangxiang Chu, Zeming Liu, Kaiqi Huang,
- Abstract要約: ビデオベースの世界モデルは、ビデオ生成と3D再構成という2つの支配的なパラダイムに沿って登場した。
世界モデリングの未来は、空間構造と時間的進化を共同でモデル化する4D世代にあると我々は主張する。
Omni-WorldBenchは,世界モデルの対話的応答能力を4次元設定で評価するためのベンチマークである。
- 参考スコア(独自算出の注目度): 39.648000265543445
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Video--based world models have emerged along two dominant paradigms: video generation and 3D reconstruction. However, existing evaluation benchmarks either focus narrowly on visual fidelity and text--video alignment for generative models, or rely on static 3D reconstruction metrics that fundamentally neglect temporal dynamics. We argue that the future of world modeling lies in 4D generation, which jointly models spatial structure and temporal evolution. In this paradigm, the core capability is interactive response: the ability to faithfully reflect how interaction actions drive state transitions across space and time. Yet no existing benchmark systematically evaluates this critical dimension. To address this gap, we propose Omni--WorldBench, a comprehensive benchmark specifically designed to evaluate the interactive response capabilities of world models in 4D settings. Omni--WorldBench comprises two key components: Omni--WorldSuite, a systematic prompt suite spanning diverse interaction levels and scene types; and Omni--Metrics, an agent-based evaluation framework that quantifies world modeling capabilities by measuring the causal impact of interaction actions on both final outcomes and intermediate state evolution trajectories. We conduct extensive evaluations of 18 representative world models across multiple paradigms. Our analysis reveals critical limitations of current world models in interactive response, providing actionable insights for future research. Omni-WorldBench will be publicly released to foster progress in interactive 4D world modeling.
- Abstract(参考訳): ビデオベースの世界モデルは、ビデオ生成と3D再構成という2つの主要なパラダイムに沿って登場した。しかし、既存の評価ベンチマークは、生成モデルに対する視覚的忠実度とテキスト-ビデオアライメントを狭く重視するか、時間的ダイナミクスを根本的に無視する静的な3D再構成メトリクスに依存している。
世界モデリングの未来は、空間構造と時間的進化を共同でモデル化する4D世代にあると我々は主張する。
このパラダイムでは、中心となる能力は対話的な応答であり、インタラクションアクションが空間と時間の間で状態遷移を駆動する方法を忠実に反映する能力である。
しかし、この臨界次元を体系的に評価する既存のベンチマークは存在しない。
このギャップに対処するために,Omni-WorldBenchを提案する。Omni-WorldBenchは,世界モデルの対話的応答能力を4D設定で評価するための総合的なベンチマークである。Omni-WorldSuiteは,多様なインタラクションレベルとシーンタイプにまたがるシステマティックプロンプトスイートである。Omni-WorldSuiteはエージェントベースの評価フレームワークで,インタラクションアクションの因果的影響を最終結果と中間状態の進化軌跡の両方に測定することで,世界モデリング能力を定量化する。
複数のパラダイムにまたがる18の代表的な世界モデルの広範な評価を行う。
我々の分析は、対話的応答における現在の世界モデルの限界を明らかにし、将来の研究に実用的な洞察を提供する。
Omni-WorldBenchは、インタラクティブな4Dワールドモデリングの進歩を促進するために、一般公開される。
関連論文リスト
- WorldArena: A Unified Benchmark for Evaluating Perception and Functional Utility of Embodied World Models [114.95269118652163]
We introduced WorldArena, an unified benchmark designed for embodied world model across both perceptual and functional dimensions。
WorldArenaは、6つのサブ次元にまたがって16のメトリクスで測定されたビデオ知覚品質、データエンジンとして世界モデルを評価する実施されたタスク機能、ポリシー評価ツール、主観的な人間の評価と統合されたアクションプランナーの3つの次元でモデルを評価する。
14の代表的なモデルに対する広範囲な実験を通して、視覚的品質が必ずしも強い具体的タスク能力に変換されるとは限らないことを示す、重要な知覚-機能的ギャップを明らかにする。
論文 参考訳(メタデータ) (2026-02-09T18:09:20Z) - WorldLens: Full-Spectrum Evaluations of Driving World Models in Real World [100.68103378427567]
エージェントは現実的な4D駆動環境を合成し、説得力があるように見えるが、物理的または行動的に失敗することが多い。
モデルがどのように構築され、理解され、その生成された世界の中でどのように振る舞うかを評価するフルスペクトルベンチマークであるWorldLensを紹介します。
さらに、数値的なスコアとテキストの合理性を備えた人間の注釈付きビデオの大規模データセット WorldLens-26K を構築し、WorldLens-Agent を開発した。
論文 参考訳(メタデータ) (2025-12-11T18:59:58Z) - 4DWorldBench: A Comprehensive Evaluation Framework for 3D/4D World Generation Models [29.06964332825464]
次世代マルチモーダル・インテリジェンス・システムの基盤として、次世代モデルが登場しつつある。
World Modelsは、画像、ビデオ、テキストからリアルでダイナミックで物理的に一貫した3D/4Dワールドを構築することを目的としている。
4DWorldBenchは,知覚品質,条件4Dアライメント,物理リアリズム,4D一貫性の4つの重要な次元でモデルを測定する。
論文 参考訳(メタデータ) (2025-11-25T02:05:35Z) - OmniWorld: A Multi-Domain and Multi-Modal Dataset for 4D World Modeling [86.12242953301121]
我々は,4次元世界モデリングに特化した大規模マルチドメインマルチモーダルデータセットであるOmniWorldを紹介した。
既存の合成データセットと比較して、OmniWorld-Gameはよりリッチなモダリティカバレッジ、より大きなスケール、より現実的な動的インタラクションを提供する。
我々は、複雑な4D環境のモデリングにおいて、現在の最先端(SOTA)アプローチの限界を明らかにするための挑戦的なベンチマークを確立する。
論文 参考訳(メタデータ) (2025-09-15T17:59:19Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。