論文の概要: SVG-IR: Spatially-Varying Gaussian Splatting for Inverse Rendering
- arxiv url: http://arxiv.org/abs/2504.06815v1
- Date: Wed, 09 Apr 2025 12:11:58 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-04-10 13:06:13.891800
- Title: SVG-IR: Spatially-Varying Gaussian Splatting for Inverse Rendering
- Title(参考訳): SVG-IR:逆レンダリングのための空間可変ガウス分割
- Authors: Hanxiao Sun, YuPeng Gao, Jin Xie, Jian Yang, Beibei Wang,
- Abstract要約: 3D Gaussian Splatting(3DGS)は、新規ビュー合成(NVS)タスクの印象的な機能を示した。
我々は,NVSとライティング品質の両面を向上することを目的とした,Spatially-vayring Gaussian Inverse Rendering (SVG-IR) と呼ばれる新しいフレームワークを提案する。
提案したSVG-IRフレームワークは、レンダリング品質を著しく向上し、ピーク信号対雑音比(PSNR)において2.5dB、リライトタスクにおいて3.5dBの既存のガウス的手法よりも2.5dB向上する。
- 参考スコア(独自算出の注目度): 23.104424058660744
- License:
- Abstract: Reconstructing 3D assets from images, known as inverse rendering (IR), remains a challenging task due to its ill-posed nature. 3D Gaussian Splatting (3DGS) has demonstrated impressive capabilities for novel view synthesis (NVS) tasks. Methods apply it to relighting by separating radiance into BRDF parameters and lighting, yet produce inferior relighting quality with artifacts and unnatural indirect illumination due to the limited capability of each Gaussian, which has constant material parameters and normal, alongside the absence of physical constraints for indirect lighting. In this paper, we present a novel framework called Spatially-vayring Gaussian Inverse Rendering (SVG-IR), aimed at enhancing both NVS and relighting quality. To this end, we propose a new representation-Spatially-varying Gaussian (SVG)-that allows per-Gaussian spatially varying parameters. This enhanced representation is complemented by a SVG splatting scheme akin to vertex/fragment shading in traditional graphics pipelines. Furthermore, we integrate a physically-based indirect lighting model, enabling more realistic relighting. The proposed SVG-IR framework significantly improves rendering quality, outperforming state-of-the-art NeRF-based methods by 2.5 dB in peak signal-to-noise ratio (PSNR) and surpassing existing Gaussian-based techniques by 3.5 dB in relighting tasks, all while maintaining a real-time rendering speed.
- Abstract(参考訳): 逆レンダリング(IR)として知られる画像から3Dアセットを再構築することは、その不適切な性質のため、依然として困難な課題である。
3D Gaussian Splatting (3DGS)は、新しいビュー合成(NVS)タスクの印象的な機能を示した。
照度をBRDFパラメータと照度に分離して照度に当てはめる方法があるが、間接照度に物理的な制約がないため、各ガウシアンが一定の材料パラメータと正規性を持つため、アーチファクトと非自然間接照度で照度が劣る。
本稿では,NVSとライティング品質の両立を目的とした,空間適応型ガウス逆レンダリング(SVG-IR)という新しいフレームワークを提案する。
この目的のために,ガウス単位の空間的変化を許容する新しい表現-空間的変化型ガウス(SVG)を提案する。
この拡張表現は、従来のグラフィックスパイプラインにおける頂点/フラグメントシェーディングに似たSVGスプレイティングスキームによって補完される。
さらに,物理的な間接照明モデルを統合することで,よりリアルなライティングを実現する。
提案したSVG-IRフレームワークは、レンダリング品質を著しく向上させ、ピーク信号対雑音比(PSNR)において2.5dB、既存のガウスベースの技法を3.5dBで上回り、リアルタイムレンダリング速度を維持しながらレンダリング速度を向上する。
関連論文リスト
- GlossGau: Efficient Inverse Rendering for Glossy Surface with Anisotropic Spherical Gaussian [4.5442067197725]
GlossGauは、バニラ3D-GSに匹敵するトレーニングとレンダリング速度を維持しながら、光沢のある表面でシーンを再構築する効率的な逆レンダリングフレームワークである。
実験によりGrossGauは、光沢のある表面を持つデータセット上で、競争力や優れた再構築を実現することが示された。
論文 参考訳(メタデータ) (2025-02-19T22:20:57Z) - MonoGSDF: Exploring Monocular Geometric Cues for Gaussian Splatting-Guided Implicit Surface Reconstruction [84.07233691641193]
高品質な再構成のための神経信号距離場(SDF)とプリミティブを結合する新しい手法であるMonoGSDFを紹介する。
任意のスケールのシーンを扱うために,ロバストな一般化のためのスケーリング戦略を提案する。
実世界のデータセットの実験は、効率を保ちながら、以前の方法よりも優れています。
論文 参考訳(メタデータ) (2024-11-25T20:07:07Z) - GUS-IR: Gaussian Splatting with Unified Shading for Inverse Rendering [83.69136534797686]
GUS-IRは、粗く光沢のある表面を特徴とする複雑なシーンの逆レンダリング問題に対処するために設計された新しいフレームワークである。
本稿では、逆レンダリング、フォワードシェーディング、遅延シェーディングに広く使われている2つの顕著なシェーディング技術を分析し、比較することから始める。
両手法の利点を組み合わせた統合シェーディングソリューションを提案する。
論文 参考訳(メタデータ) (2024-11-12T01:51:05Z) - 3iGS: Factorised Tensorial Illumination for 3D Gaussian Splatting [15.059156311856087]
3D Gaussian Splatting(3iGS)は、3D Gaussian Splatting(3DGS)レンダリング品質を改善する。
3Dガウスアンを放射場表現として用いることで、リアルタイムレンダリング速度で高品質なノベルビュー合成が可能になった。
論文 参考訳(メタデータ) (2024-08-07T13:06:29Z) - DeferredGS: Decoupled and Editable Gaussian Splatting with Deferred Shading [50.331929164207324]
我々は,遅延シェーディングを用いたガウススプレイティング表現のデカップリングと編集を行うDedeerredGSを紹介する。
定性的かつ定量的な実験は、新しいビューおよび編集タスクにおけるDederredGSの優れた性能を示す。
論文 参考訳(メタデータ) (2024-04-15T01:58:54Z) - GES: Generalized Exponential Splatting for Efficient Radiance Field Rendering [112.16239342037714]
GES(Generalized Exponential Splatting)は、GEF(Generalized Exponential Function)を用いて3Dシーンをモデル化する斬新な表現である。
周波数変調損失の助けを借りて、GESは新規なビュー合成ベンチマークにおいて競合性能を達成する。
論文 参考訳(メタデータ) (2024-02-15T17:32:50Z) - GIR: 3D Gaussian Inverse Rendering for Relightable Scene Factorization [62.13932669494098]
本稿では,3次元ガウス表現を用いた3次元ガウス逆レンダリング(GIR)手法を提案する。
最短固有ベクトルを用いて各3次元ガウスの正規性を計算する。
我々は3次元ガウシアン毎に方向対応の放射光を格納し、多重バウンス光輸送を近似するために二次照明をアンタングルするために、効率的なボクセルベースの間接照明追跡方式を採用する。
論文 参考訳(メタデータ) (2023-12-08T16:05:15Z) - Relightable 3D Gaussians: Realistic Point Cloud Relighting with BRDF Decomposition and Ray Tracing [21.498078188364566]
フォトリアリスティックなリライトを実現するために,新しい微分可能な点ベースレンダリングフレームワークを提案する。
提案したフレームワークは、メッシュベースのグラフィクスパイプラインを、編集、トレース、リライトを可能にするポイントベースのパイプラインで革新する可能性を示している。
論文 参考訳(メタデータ) (2023-11-27T18:07:58Z) - GS-IR: 3D Gaussian Splatting for Inverse Rendering [71.14234327414086]
3次元ガウス散乱(GS)に基づく新しい逆レンダリング手法GS-IRを提案する。
我々は、未知の照明条件下で撮影された多視点画像からシーン形状、表面物質、環境照明を推定するために、新しいビュー合成のための最高のパフォーマンス表現であるGSを拡張した。
フレキシブルかつ表現力のあるGS表現は、高速かつコンパクトな幾何再構成、フォトリアリスティックな新規ビュー合成、有効物理ベースレンダリングを実現する。
論文 参考訳(メタデータ) (2023-11-26T02:35:09Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。