論文の概要: Holi-Spatial 360: Generative Reconstruction from Sparse Panoramas for Spatial Rendering and Intelligence
- arxiv url: http://arxiv.org/abs/2610.19502v1
- Date: Wed, 14 Oct 2026 03:21:09 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-15 21:06:15.934152
- Title: Holi-Spatial 360: Generative Reconstruction from Sparse Panoramas for Spatial Rendering and Intelligence
- Title(参考訳): Holi-Spatial 360:空間レンダリングとインテリジェンスのためのスパースパノラマからの生成的再構成
- Abstract要約: Holi-Spatial 360は生成的再構築とデータキュレーションのフレームワークである。
オンライン不動産パノラマを注釈付きマルチルーム3D環境に変換する。
Holi360には、1K以上のマルチルーム3DGSシーン、100K以上のインスタンスアノテーション、2Mの空間質問応答ペアが含まれている。
- 参考スコア(独自算出の注目度): 31.80799673246686
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Spatial intelligence requires scalable 3D environments that are both photorealistic and semantically grounded, yet existing indoor datasets are dominated by room-scale captures and costly LiDAR acquisition. Online real-estate platforms offer abundant panoramas of diverse multi-room homes, but sparse viewpoints and texture-poor regions make reconstruction severely under-constrained. We introduce Holi-Spatial 360, a generative reconstruction and data curation framework for converting these panoramas into annotated multi-room 3D environments. Because reconstruction quality bounds subsequent generation, our Correspondence-Guided Geometric Optimization converts feed-forward reconstruction priors into reliable cross-view constraints and builds a coherent 3D Gaussian Splatting representation as 3D spatial memory. Adapted single-image and video priors then restore appearance and complete continuous trajectories while preserving observed content. The reconstructed scenes support arbitrary RGB-D rendering and an automated curation pipeline that combines end-to-end 3D grounding with VLM-based verification. Holi360 contains over 1K multi-room 3DGS scenes, more than 100K instance annotations, and 2M spatial question-answer pairs. We also introduce the Holi360 benchmark to evaluate the spatial understanding of VLMs in real-world, multi-room indoor environments. Experiments demonstrate superior reconstruction and curation quality under sparse panoramic inputs, while fine-tuning VLMs on Holi360 substantially improves spatial reasoning capabilities.
- Abstract(参考訳): 空間的インテリジェンスには、フォトリアリスティックかつセマンティックな基盤を持つスケーラブルな3D環境が必要ですが、既存の屋内データセットは、ルームスケールのキャプチャとコストのかかるLiDARの取得によって支配されています。
オンライン不動産プラットフォームは多様な多ルーム住宅のパノラマを豊富に提供しているが、スペアな視点とテクスチャの少ない地域は、過度の制約を厳しく受けている。
本稿では,これらのパノラマを注釈付きマルチルーム3D環境に変換するための生成的再構成およびデータキュレーションフレームワークであるHoli-Spatial 360を紹介する。
再構成品質はその後の世代にまたがるため,我々の対応型幾何最適化はフィードフォワードの事前表現を信頼性のあるクロスビュー制約に変換し,コヒーレントな3次元ガウス分割表現を3次元空間記憶として構築する。
適応された単一画像とビデオの先行画像は、観察された内容を保持しながら外観を復元し、完全な連続的な軌跡を復元する。
再構成されたシーンは任意のRGB-Dレンダリングと、エンドツーエンドの3DグラウンドとVLMベースの検証を組み合わせた自動キュレーションパイプラインをサポートする。
Holi360には、1K以上のマルチルーム3DGSシーン、100K以上のインスタンスアノテーション、2Mの空間質問応答ペアが含まれている。
また,実世界のマルチルーム屋内環境におけるVLMの空間的理解を評価するために,Holi360ベンチマークを導入した。
実験では、細かなパノラマ入力下での再現性やキュレーション品質が向上し、Holi360上の微調整VLMは空間推論能力を大幅に向上する。
関連論文リスト
- GenRecon: Bridging Generative Priors for Multi-View 3D Scene Reconstruction [69.35136600319714]
マルチビューRGB画像から高忠実度3Dシーンを再現する手法を提案する。
シーン再構成を条件付き3次元生成として,空間的局所化,重なり合うチャンクの集合に配置した。
切刃再建法を16%上回る高忠実度結果を得た。
論文 参考訳(メタデータ) (2026-05-22T17:49:59Z) - PanoWorld: A Generative Spatial World Model for Consistent Whole-House Panorama Synthesis [9.056861577664717]
パノワールド(英: PanoWorld)は、ノードベースのパノラマの自動回帰生成としてハウス全体の合成を扱う生成空間世界モデルである。
クロスノードレイアウトとマテリアル一貫性を改善しつつ、高周波2D合成品質を保っている。
論文 参考訳(メタデータ) (2026-05-18T06:25:37Z) - Holo360D: A Large-Scale Real-World Dataset with Continuous Trajectories for Advancing Panoramic 3D Reconstruction and Beyond [27.57108346101154]
Holo360Dは、正確な深度マップを備えた連続パノラマシーケンスを提供する最初の大規模データセットである。
3Dデータ品質を向上させるために,幾何分解,メッシュ穴充填,領域固有の再処理を含む後処理パイプラインを提案する。
以上の結果から,Holo360Dは優れたトレーニング信号を提供し,パノラマ3D再構成モデルの総合的なベンチマークを提供することがわかった。
論文 参考訳(メタデータ) (2026-04-24T12:03:27Z) - LightHarmony3D: Harmonizing Illumination and Shadows for Object Insertion in 3D Gaussian Splatting [90.15229815175593]
光ハーモニー3D(LightHarmony3D)について述べる。
繰り返し最適化の代わりに生成前処理を活用することにより,本手法はシーン照明を効率よく捉えることができる。
3DGSでメッシュ挿入のための最初の専用ベンチマークを導入し、照明の一貫性と光リアリズムを評価するための標準化された評価フレームワークを提供する。
論文 参考訳(メタデータ) (2026-03-31T03:26:30Z) - IM360: Large-scale Indoor Mapping with 360 Cameras [48.99932182976206]
大規模屋内環境のための新しい3Dマッピングパイプラインを提案する。
本稿では,球面カメラモデルとStructure-from-Motion(SfM)パイプラインを融合したIM360を提案する。
我々のSfMは、360度画像に特化して設計された密マッチング機能を利用しており、画像登録の優れた能力を示している。
大規模屋内シーンにおけるパイプラインの評価を行い,実世界のシナリオにおけるその効果を実証した。
論文 参考訳(メタデータ) (2025-02-18T05:15:19Z) - Sp2360: Sparse-view 360 Scene Reconstruction using Cascaded 2D Diffusion Priors [51.36238367193988]
潜時拡散モデル(LDM)を用いた360度3次元シーンのスパースビュー再構成に挑戦する。
SparseSplat360は,未完成の細部を埋めたり,新しいビューをクリーンにするために,インペイントとアーティファクト除去のカスケードを利用する手法である。
提案手法は,9つの入力ビューから360度映像全体を生成する。
論文 参考訳(メタデータ) (2024-05-26T11:01:39Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。