論文の概要: Matrix-Game 4.0: Harnessing Video Models for Real-Time Playable Game Worlds

• arxiv url: http://arxiv.org/abs/2610.27999v1
• Date: Tue, 20 Oct 2026 10:41:38 GMT
• ステータス: 翻訳完了
• システム内更新日: 2026-10-21 21:58:47.772938
• Title: Matrix-Game 4.0: Harnessing Video Models for Real-Time Playable Game Worlds
• Title（参考訳）: Matrix-Game 4.0: リアルタイムプレイ可能なゲーム用ビデオモデル
• Abstract要約: この設計に基づいて構築された最初のシステムとしてMatrix-Game 4.0を紹介する。 軽量ゲームエンジンは世界状態を維持し、インタラクションルールを実行する。 符号化エージェントは、エンジンレンダリングされたローポーリーなアイデアをゲームコードや動的シーンキャプションに変換する。
• 参考スコア（独自算出の注目度）: 22.799706994224298
• License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
• Abstract: Moving from controllable videos to genuinely playable worlds requires persistent world state, executable game rules, and low-latency interaction. We outline a roadmap for the next generation of Matrix-Game that separates game execution from visual generation through an executable game harness, and introduce Matrix-Game 4.0 as the first system built on this design. A lightweight game engine maintains world state and executes interaction rules, a multimodal coding agent translates player ideas into game code and dynamic scene captions, and a renderer based on autoregressive video model transforms engine-rendered low-poly proxies into detailed visuals, conditioned on dynamic captions and memory references. This framework provides continuous guidance for visual generation and enables natural-language creation and modification of scenes and gameplay. Our renderer is trained on aligned low-poly and high-fidelity video pairs and distilled into a causal generator that generates in four-frame chunks with one or two denoising steps. Together with targeted inference optimizations, Matrix-Game 4.0 enables 480p, 60 FPS gameplay on a single NVIDIA RTX5090 with a key-press-to-display latency of 112ms. Single-step generation achieves 83FPS steady-state throughput with 18.2GiB of peak GPU memory usage. With fixed prompts, steady-state throughput also reaches 67FPS on an RTX5080 and 58FPS on an RTX5070Ti. We demonstrate customizable shooter and driving games with engine-enforced mechanics, and release code, model weights, and low-poly game assets to support research and creation of playable game worlds.
• Abstract（参考訳）: コントロール可能なビデオから真のプレイ可能な世界へ移行するには、永続的な世界状態、実行可能なゲームルール、低レイテンシのインタラクションが必要である。 我々は,ゲーム実行を視覚生成から実行可能ゲームハーネスを通じて分離する次世代のMatrix-Gameのロードマップを概説し,この設計に基づいて構築された最初のシステムとしてMatrix-Game 4.0を紹介した。 軽量なゲームエンジンは、世界状態を維持し、インタラクションルールを実行し、マルチモーダルコーディングエージェントは、プレイヤのアイデアをゲームコードやダイナミックシーンキャプションに変換するとともに、自動回帰ビデオモデルに基づくレンダラは、エンジンレンダリングされたローポーリープロキシを、ダイナミックキャプションやメモリ参照に基づいて、詳細なビジュアルに変換する。 このフレームワークは、視覚生成のための継続的なガイダンスを提供し、シーンやゲームプレイの自然言語生成と修正を可能にする。 我々のレンダラーは、高精細度と高精細度のビデオペアを並べて訓練し、4コマの塊を1つか2ステップで生成する因果生成器に蒸留する。 ターゲット推論の最適化とともに、Matrix-Game 4.0は1つのNVIDIA RTX5090上で480p、60 FPSのゲームプレイを可能にし、112msのキープレッシャーとディスプレイのレイテンシを持つ。 シングルステップ生成は、83FPSの定常スループットを実現し、18.2GiBのピークGPUメモリを使用する。 固定プロンプトでは、RTX5080では67FPS、RTX5070Tiでは58FPSに達する。 我々は,エンジン強化メカニックを用いたカスタマイズ可能なシューティングゲームと,ゲーム世界の研究・創出を支援するためのコード,モデルウェイト,低ポリーゲームアセットの公開を実演する。

関連論文リスト

• Code2Worlds-2: Physically Plausible Agent Harness for Embodied World Simulation [57.44452322402844]
  我々は、4Dワールドジェネレーションを具現化された世界シミュレーションに変換するCode2Worlds-2をCode2Worldsの拡張として提示する。 SimCode4Dや、自然、屋内、工業、都市、ロボットが操作可能なシーンでの実験は、Code2Worlds-2が物理的に可塑性でシミュレータ互換でロボットが操作可能なシーンを制作していることを示している。
  論文  参考訳（メタデータ） (2026-10-13T03:30:40Z)
• Building Pretraining Data for World Models: An Unreal Engine-Based Pipeline for Action-Conditioned Video Generation [53.851483224691634]
  動作条件付きマルチビュービデオを生成するためにUnreal Engine上に構築した大規模合成データ生成パイプラインを提案する。 パイプラインは1080pビデオの2,691時間、720pビデオの6,076時間を生成する。
  論文  参考訳（メタデータ） (2026-09-03T08:58:04Z)
• Magpie: Real-Time World Renderer for Interactive Games [19.2394360704074]
  Magpieはインタラクティブゲームのためのリアルタイム生成ワールドレンダリングシステムである。 インタラクティブゲームのためのリアルタイム生成ワールドレンダリングシステムMagpieについて紹介する。
  論文  参考訳（メタデータ） (2026-08-27T14:21:49Z)
• StatePlay: State-Aware Game World Models for Mechanics-Consistent Generation [53.07918503798731]
  StatePlayは、ビジュアルコンテンツとゲーム状態を予測する新しいステート対応ゲームワールドモデルであり、メカニクスと一貫性のある生成を促進する。 我々の研究は、状態認識型ゲームワールドモデリングの重要性を強調し、完全かつ機械的に忠実なゲーム生成に向けたピクセルレベルのリアリズムを超えて進歩している。
  論文  参考訳（メタデータ） (2026-07-29T10:49:30Z)
• GameCraft-Bench: Can Agents Build Playable Games End-to-End in a Real Game Engine? [65.42976417627254]
  ゲーム生成はゲームエンジン内で行われ、スクリプト、シーン、アセット、レンダリング、実行時インタラクションは共同でコヒーレントなゲームプレイを生成する必要がある。 我々は、完全なゲームアーティファクトを生成する問題として、エンド・ツー・エンドのゲーム生成を形式化する。 我々は、このフレームワークを15のゲームファミリーで140のGodotタスクからなるベンチマークであるGameCraft-Benchとしてインスタンス化する。
  論文  参考訳（メタデータ） (2026-06-16T12:34:39Z)
• Matrix-Game: Interactive World Foundation Model [11.144250200432458]
  Matrix-Gameは、制御可能なゲームワールドジェネレーションのためのインタラクティブなワールドファンデーションモデルである。 本モデルでは,参照画像,動作コンテキスト,ユーザアクションを条件とした,制御可能な画像から世界への生成パラダイムを採用している。 17億以上のパラメータを持つMatrix-Gameは、キャラクタアクションとカメラの動きを正確に制御できる。
  論文  参考訳（メタデータ） (2025-06-23T14:40:49Z)
• Playable Game Generation [22.17100581717806]
  本稿では,ゲームデータ生成,自動回帰型DiT拡散モデル,プレイヤビリティに基づく評価フレームワークなどを含むemphPlayGenを提案する。 PlayGenはリアルタイムインタラクションを実現し、十分な視覚的品質を確保し、正確なインタラクティブなメカニクスシミュレーションを提供する。
  論文  参考訳（メタデータ） (2024-12-01T16:53:02Z)
• GameGen-X: Interactive Open-world Game Video Generation [10.001128258269675]
  我々は,オープンワールドゲームビデオの生成とインタラクティブ制御に特化して設計された,最初の拡散トランスフォーマーモデルであるGameGen-Xを紹介する。 革新的なキャラクター、動的環境、複雑なアクション、多様なイベントなど、一連のゲームエンジン機能をシミュレートする。 インタラクティブな制御性を提供し、現在のクリップに基づいたコンテンツの予測と将来的な変更を可能にし、ゲームプレイシミュレーションを可能にする。
  論文  参考訳（メタデータ） (2024-11-01T17:59:17Z)
• Promptable Game Models: Text-Guided Game Simulation via Masked Diffusion Models [68.85478477006178]
  ニューラルビデオゲームシミュレータのためのPGM(Promptable Game Model)を提案する。 ユーザーは高レベルのアクションシーケンスと低レベルのアクションシーケンスでゲームを実行することができる。 私たちのPGMは、エージェントの目標をプロンプトの形で指定することで、ディレクターのモードをアンロックします。 提案手法は,既存のニューラルビデオゲームシミュレータのレンダリング品質を著しく上回り,現在の最先端の能力を超えたアプリケーションをアンロックする。
  論文  参考訳（メタデータ） (2023-03-23T17:43:17Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。