論文の概要: PhysAg3D: Bridging 3D Generative and Agentic Models for High-Fidelity and Physically-Interactive Assets
- arxiv url: http://arxiv.org/abs/2610.39924v1
- Date: Thu, 29 Oct 2026 12:29:27 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-11-02 22:17:53.816246
- Title: PhysAg3D: Bridging 3D Generative and Agentic Models for High-Fidelity and Physically-Interactive Assets
- Title(参考訳): PhysAg3D:高忠実で物理的に相互作用するアセットのための3次元生成およびエージェントモデルの作成
- Abstract要約: PhysAg3Dは3次元生成モデルとエージェント推論とツール利用を結合する。
視覚言語エージェントは、まず、画像から意味的部分、候補相互作用、および物理的先行を推測する。
3Dジェネレータは、同じ画像からテクスチャ化された全体オブジェクトメッシュを生成する。
- 参考スコア(独自算出の注目度): 70.90729984162039
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Generating interactive 3D assets from a single image requires realistic appearance, fidelity to the depicted object, and plausible physical behavior. Yet detailed geometry alone does not determine how an object should move or deform. We introduce PhysAg3D, which couples 3D generative models with agentic reasoning and tool use. A vision-language agent first infers semantic parts, candidate interactions, and physical priors from the image; a 3D generator then produces a textured whole-object mesh from the same image. A hierarchical interaction representation links these revisable priors to mechanisms and the generated surfaces they control, organizing interaction construction and refinement. Guided by this representation and observations of the mesh, the agent uses geometric and physical tools to construct parts, joints, deformable regions, and surface bindings while retaining useful generated geometry and materials. Rendered interactions and execution measurements guide targeted revisions within a fixed budget. The framework accommodates both rigid articulation and compliant deformation. Quantitative and qualitative evaluations on real photographs and external benchmarks demonstrate detailed, image-aligned assets with plausible interactions. Ablations support bounded refinement and source-surface preservation. Project Page: supra-3d.github.io/PhysAg3D.
- Abstract(参考訳): 単一の画像からインタラクティブな3Dアセットを生成するには、現実的な外観、描写対象への忠実さ、そしてもっともらしい物理的な振る舞いが必要である。
しかし、詳細な幾何学だけでは、オブジェクトの移動や変形の仕方を決定できない。
PhysAg3Dは3次元生成モデルとエージェント推論とツール利用を結合する。
視覚言語エージェントは、まず画像からセマンティック部分、候補相互作用、物理的先行を推測し、3Dジェネレータは、同じ画像からテクスチャ化された全体オブジェクトメッシュを生成する。
階層的な相互作用表現は、これらの変更可能な先行と、それらが制御する機構と生成された表面を結びつけ、相互作用の構築と洗練を組織化する。
このメッシュの表現と観察によって導かれたこのエージェントは、幾何学的および物理的ツールを使用して、有用な幾何学や材料を保持しながら、部品、関節、変形可能な領域、表面の結合を構築する。
レンダリングされたインタラクションと実行の測定は、固定予算内でターゲットのリビジョンをガイドします。
この枠組みは厳密な調音と適合した変形の両方に対応している。
実際の写真と外部ベンチマークの定量的および質的な評価は、詳細な画像整列資産とプラウシブルな相互作用を示す。
アブレーションは、境界改質と原位置保存をサポートする。
プロジェクトページ: supra-3d.github.io/PhysAg3D
関連論文リスト
- PhysCreator: Creating Physically-Attributed 3D Assets at Will [13.710549410035469]
画像からシミュレーション可能な3D表現を直接生成する統合フレームワークである textbfPhysCreator を提案する。
本手法は,従来の手法に比べて視覚的品質,身体的妥当性,一般化に優れる。
論文 参考訳(メタデータ) (2026-10-25T17:55:06Z) - Fysiverse-3D-Vision Technical Report: Generating Executable 3D Worlds from Images through Unified Spatial Reasoning [62.09790533047924]
生成モデルは、高度な画像条件付き3Dコンテンツ生成が可能だが、単一の画像から制御可能で実行可能な3Dシーンを生成することは、依然として困難である。
本研究では,Fysiverse-3D-Visionを提案する。Fysiverse-3D-Visionは1つの画像から生成した3次元シーンの再構成と実行可能アセット構築のための統合視覚言語-幾何学フレームワークである。
本フレームワークは,既存の手法と比較して,幾何学的整合性,レイアウト推定,レンダリング品質,物理的特性の理解に優れる。
論文 参考訳(メタデータ) (2026-09-22T06:22:31Z) - SOPHY: Learning to Generate Simulation-Ready Objects with Physical Materials [10.156212838002903]
SOPHYは3次元物理を意識した形状合成のための生成モデルである。
本手法は, 物理接地力学に関連する形状, テクスチャ, 材料特性を共同で合成する。
論文 参考訳(メタデータ) (2025-04-17T06:17:24Z) - SIGHT: Synthesizing Image-Text Conditioned and Geometry-Guided 3D Hand-Object Trajectories [124.24041272390954]
手動物体の相互作用をモデル化することは、ロボットと具体化されたAIシステムを前進させる大きな可能性を秘めている。
SIGHTは、1つの画像から現実的で物理的に妥当な3Dハンドオブジェクトインタラクショントラジェクトリを生成することに焦点を当てた,新しいタスクである。
SIGHT-Fusionは,データベースから最もよく似た3Dオブジェクトメッシュを抽出し,この課題に対処する,新しい拡散型画像文条件付き生成モデルを提案する。
論文 参考訳(メタデータ) (2025-03-28T20:53:20Z) - Physically Compatible 3D Object Modeling from a Single Image [109.98124149566927]
単一画像を3次元物理オブジェクトに変換するフレームワークを提案する。
我々のフレームワークは、リコンストラクションプロセスに物理的な互換性を組み込む。
既存の手法よりも3Dモデルの物理的リアリズムを一貫して強化する。
論文 参考訳(メタデータ) (2024-05-30T21:59:29Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。