論文の概要: CityGo: Lightweight Urban Modeling and Rendering with Proxy Buildings and Residual Gaussians
- arxiv url: http://arxiv.org/abs/2505.21041v3
- Date: Mon, 09 Jun 2025 08:56:18 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-06-10 16:33:10.14937
- Title: CityGo: Lightweight Urban Modeling and Rendering with Proxy Buildings and Residual Gaussians
- Title(参考訳): CityGo: プレッシービルと残留ガウシアンによる軽量都市モデリングとレンダリング
- Authors: Weihang Liu, Yuhui Zhong, Yuke Li, Xi Chen, Jiadi Cui, Honglong Zhang, Lan Xu, Xin Lou, Yujiao Shi, Jingyi Yu, Yingliang Zhang,
- Abstract要約: CityGoは、テクスチャ化されたプロキシ幾何と周囲の3Dガウスアンを組み合わせたハイブリッドフレームワークで、空から見た都市景観のレンダリングを行う。
我々の表現はトレーニング時間を大幅に短縮し、平均1.4倍のスピードアップを実現し、純粋な3次元ガウススプラッティングアプローチに匹敵する視覚的忠実度を提供する。
- 参考スコア(独自算出の注目度): 48.22146326647521
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Accurate and efficient modeling of large-scale urban scenes is critical for applications such as AR navigation, UAV based inspection, and smart city digital twins. While aerial imagery offers broad coverage and complements limitations of ground-based data, reconstructing city-scale environments from such views remains challenging due to occlusions, incomplete geometry, and high memory demands. Recent advances like 3D Gaussian Splatting (3DGS) improve scalability and visual quality but remain limited by dense primitive usage, long training times, and poor suit ability for edge devices. We propose CityGo, a hybrid framework that combines textured proxy geometry with residual and surrounding 3D Gaussians for lightweight, photorealistic rendering of urban scenes from aerial perspectives. Our approach first extracts compact building proxy meshes from MVS point clouds, then uses zero order SH Gaussians to generate occlusion-free textures via image-based rendering and back-projection. To capture high-frequency details, we introduce residual Gaussians placed based on proxy-photo discrepancies and guided by depth priors. Broader urban context is represented by surrounding Gaussians, with importance-aware downsampling applied to non-critical regions to reduce redundancy. A tailored optimization strategy jointly refines proxy textures and Gaussian parameters, enabling real-time rendering of complex urban scenes on mobile GPUs with significantly reduced training and memory requirements. Extensive experiments on real-world aerial datasets demonstrate that our hybrid representation significantly reduces training time, achieving on average 1.4x speedup, while delivering comparable visual fidelity to pure 3D Gaussian Splatting approaches. Furthermore, CityGo enables real-time rendering of large-scale urban scenes on mobile consumer GPUs, with substantially reduced memory usage and energy consumption.
- Abstract(参考訳): 大規模都市のシーンの高精度かつ効率的なモデリングは、ARナビゲーション、UAVベースの検査、スマートシティのデジタルツインといった応用に不可欠である。
地上画像は広範に網羅し、地上データの制限を補完するが、そのような視点から都市規模の環境を再構築することは、排他的、不完全な幾何学的、高い記憶要求のために難しいままである。
3D Gaussian Splatting(3DGS)のような最近の進歩はスケーラビリティと視覚的品質を改善しているが、厳密なプリミティブの使用、長いトレーニング時間、エッジデバイスに適さない能力によって制限されている。
本研究では,空から見た都市景観の軽量で光リアルなレンダリングを実現するために,テクスチャ化されたプロキシ幾何と3次元ガウシアンを併用したハイブリッドフレームワークCityGoを提案する。
提案手法はまず,MVSポイントクラウドからコンパクトなビルディングメッシュを抽出し,ゼロオーダーのSHガウスアンを用いて画像ベースレンダリングとバックプロジェクションによる閉塞のないテクスチャを生成する。
高周波の詳細を捉えるために,プロキシフォトの相違に基づく残留ガウス法を導入し,奥行きの先行を導いた。
より広い都市環境はガウシアン周辺で表現され、非臨界領域に重要視されるダウンサンプリングによって冗長性を減少させる。
最適化された最適化戦略は、プロキシテクスチャとガウスパラメータを共同で洗練し、モバイルGPU上で複雑な都市シーンのリアルタイムレンダリングを可能にし、トレーニングとメモリの要求を大幅に削減する。
実世界の航空データセットに対する大規模な実験により、我々のハイブリッド表現はトレーニング時間を著しく短縮し、平均1.4倍のスピードアップを実現し、純粋な3Dガウス・スプレイティングアプローチに匹敵する視覚的忠実度を提供することを示した。
さらにCityGoは、モバイルの消費者向けGPU上で大規模な都市シーンのリアルタイムレンダリングを可能にし、メモリ使用量とエネルギー消費を大幅に削減する。
関連論文リスト
- EVolSplat: Efficient Volume-based Gaussian Splatting for Urban View Synthesis [61.1662426227688]
既存のNeRFおよび3DGSベースの手法は、フォトリアリスティックレンダリングを実現する上で有望な結果を示すが、スローでシーンごとの最適化が必要である。
本稿では,都市景観を対象とした効率的な3次元ガウススプレイティングモデルEVolSplatを紹介する。
論文 参考訳(メタデータ) (2025-03-26T02:47:27Z) - PUP 3D-GS: Principled Uncertainty Pruning for 3D Gaussian Splatting [59.277480452459315]
本研究では,視覚的忠実度と前景の細部を高い圧縮比で保持する原理的感度プルーニングスコアを提案する。
また,トレーニングパイプラインを変更することなく,事前訓練した任意の3D-GSモデルに適用可能な複数ラウンドプルーファインパイプラインを提案する。
論文 参考訳(メタデータ) (2024-06-14T17:53:55Z) - HGS-Mapping: Online Dense Mapping Using Hybrid Gaussian Representation in Urban Scenes [9.698226248064454]
大規模都市景観におけるオンライン高密度マッピングフレームワークHGS-Mappingを提案する。
私たちは、ガウス表現を都市景観のオンライン密集地図に統合した最初の人物です。
提案手法は66%のガウスしか採用せず,SOTA再建精度が向上し,再建速度は20%向上した。
論文 参考訳(メタデータ) (2024-03-29T13:16:05Z) - HO-Gaussian: Hybrid Optimization of 3D Gaussian Splatting for Urban Scenes [24.227745405760697]
本稿では,グリッドベースボリュームと3DGSパイプラインを組み合わせたHO-Gaussianというハイブリッド最適化手法を提案する。
広範に使用されている自律走行データセットの結果から,HO-Gaussianはマルチカメラ都市データセット上でリアルタイムに写真リアリスティックレンダリングを実現することが示された。
論文 参考訳(メタデータ) (2024-03-29T07:58:21Z) - Scaffold-GS: Structured 3D Gaussians for View-Adaptive Rendering [71.44349029439944]
最近の3次元ガウス散乱法は、最先端のレンダリング品質と速度を達成している。
局所的な3Dガウス分布にアンカーポイントを用いるScaffold-GSを導入する。
提案手法は,高品質なレンダリングを実現しつつ,冗長なガウスを効果的に削減できることを示す。
論文 参考訳(メタデータ) (2023-11-30T17:58:57Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。