論文の概要: RxGS: Relightable Gaussian Stylization via BRDF Decomposition
- arxiv url: http://arxiv.org/abs/2610.25681v1
- Date: Mon, 19 Oct 2026 02:31:17 GMT
- ステータス: 情報取得中
- システム内更新日: 2026-10-20 22:41:26.706842
- Title: RxGS: Relightable Gaussian Stylization via BRDF Decomposition
- Title(参考訳): RxGS:BRDF分解によるガウススティル化
- Abstract要約: RxGSは、双方向反射分布関数(BRDF)を意識した3次元ガウス表現に基づく、リライザブルな3Dシーンスタイリングフレームワークである。
RxGSは評価されたすべてのNeRF合成シーンで最低であり、実際の撮影シーンでは競争力を維持している。
- 参考スコア(独自算出の注目度): 7.044169997773026
- License:
- Abstract: Reference-based 3D scene stylization transfers the appearance of a reference image onto a reconstructed 3D scene while preserving scene geometry. Recent methods perform this transfer by optimizing the appearance representation of neural scene models including Neural Radiance Fields (NeRF) and 3D Gaussian Splatting (3DGS). These methods optimize an RGB appearance representation, in which a single per-point colour combines the effects of material reflectance, environment illumination, together with the shading it produces, and the viewing direction. When stylization modifies this combined colour, the illumination effects present during stylization are baked into the stored appearance, so the stylized scene cannot be rendered under different illumination. To address this limitation, we present RxGS, a relightable 3D scene stylization framework built on a Bidirectional Reflectance Distribution Function (BRDF)-aware 3D Gaussian representation. Rather than modifying a per-point RGB colour, RxGS optimizes only the diffuse albedo field recovered by inverse rendering, while leaving roughness, metallicity, surface normals, and the estimated environment lighting unchanged. As a result, the stylized scene keeps all the components a physically-based renderer needs other than the edited albedo, and can therefore still be relit. RxGS optimizes the albedo field using a nearest-neighbour feature matching loss together with a spatial smoothness prior over Gaussian centres. We evaluate the method using a Geometry Consistency Cost (GCC) based on optical-flow warping error. RxGS achieves the lowest GCC on all evaluated NeRF-Synthetic scenes and remains competitive on real-captured scenes, while additionally supporting relightable stylization, which existing reference-based 3D scene stylization methods do not provide.
- Abstract(参考訳): 参照ベース3Dシーンスタイリングは、シーン形状を保存しながら、参照画像の外観を再構成された3Dシーンに転送する。
ニューラルレイディアンス・フィールド(NeRF)や3Dガウス・スプレイティング(3DGS)などのニューラルシーンモデルの外観表現を最適化して,この転送を行う。
これらの手法は、RGBの外観表現を最適化し、材料反射率、環境照明の影響と、それが生み出す陰影、および観察方向を合成する。
この組み合わせ色を変更すると、スタイリゼーション中に現れる照明効果を記憶された外観に焼き付けるので、異なる照明下では、スタイリゼーションシーンをレンダリングできない。
この制限に対処するため、RxGSは双方向反射分布関数(BRDF)を意識した3Dガウス表現上に構築された3Dシーンスタイリングフレームワークである。
点当たりのRGB色を変更する代わりに、RxGSは逆レンダリングによって復元された拡散アルベド場のみを最適化する。
その結果、スタイリングされたシーンは、すべてのコンポーネントを編集されたアルベド以外の物理的にベースとしたレンダラーを必要としており、従って依然として依存することができる。
RxGSは、ガウス中心に先行する空間的滑らかさとともに、最も近い隣り合う特徴の損失を用いてアルベド場を最適化する。
光流量ワープ誤差に基づくGCC (Geometry Consistency Cost) を用いた手法の評価を行った。
RxGSは評価されたすべてのNeRF合成シーンで最低のGCCを達成し、実際の撮影シーンでは競争力を維持する一方で、既存の参照ベースの3Dシーンスタイリゼーション手法では提供されないリライタブルなスタイリゼーションもサポートしている。
関連論文リスト
- VisibilitySplat: Ray-Traced Occlusion for Relighting with 3D Gaussian Splatting [0.0]
我々は3D Splatting(3DGS)による逆レンダリングに対処し,光や光の分解だけでなく,光の鮮明な可視性モデリングを導入している。
当社のアプローチでは,標準化された3DGSパイプラインを,少ない可視性オラクルで拡張しています。
その結果,ノベル・ビュー・レンダリング (NVS) やaedo 再構成,双方向のリライトなど,いくつかのベースラインの改善が見られた。
論文 参考訳(メタデータ) (2026-10-14T09:17:40Z) - LightHarmony3D: Harmonizing Illumination and Shadows for Object Insertion in 3D Gaussian Splatting [90.15229815175593]
光ハーモニー3D(LightHarmony3D)について述べる。
繰り返し最適化の代わりに生成前処理を活用することにより,本手法はシーン照明を効率よく捉えることができる。
3DGSでメッシュ挿入のための最初の専用ベンチマークを導入し、照明の一貫性と光リアリズムを評価するための標準化された評価フレームワークを提供する。
論文 参考訳(メタデータ) (2026-03-31T03:26:30Z) - BEAM: Bridging Physically-based Rendering and Gaussian Modeling for Relightable Volumetric Video [58.97416204208624]
BEAMは、4Dガウス表現を物理ベースレンダリング(PBR)でブリッジし、高品質でライティング可能なビデオを生成する新しいパイプラインである。
BEAMは、様々な照明条件下で現実的な人生のような可視化を提供することで、インタラクティブなエンターテイメント、ストーリーテリング、クリエイティブな可視化の新しい可能性を開く。
論文 参考訳(メタデータ) (2025-02-12T10:58:09Z) - GUS-IR: Gaussian Splatting with Unified Shading for Inverse Rendering [83.69136534797686]
GUS-IRは、粗く光沢のある表面を特徴とする複雑なシーンの逆レンダリング問題に対処するために設計された新しいフレームワークである。
本稿では、逆レンダリング、フォワードシェーディング、遅延シェーディングに広く使われている2つの顕著なシェーディング技術を分析し、比較することから始める。
両手法の利点を組み合わせた統合シェーディングソリューションを提案する。
論文 参考訳(メタデータ) (2024-11-12T01:51:05Z) - SpectroMotion: Dynamic 3D Reconstruction of Specular Scenes [7.590932716513324]
本稿では,3次元ガウス散乱(3DGS)と物理ベースレンダリング(PBR)と変形場を組み合わせた動的特異シーンの再構成手法を提案する。
フォトリアリスティック・リアルワールド・ダイナミック・スペキュラ・シーンを合成できる3DGS法は、現存する唯一のものである。
論文 参考訳(メタデータ) (2024-10-22T17:59:56Z) - Reference-based Controllable Scene Stylization with Gaussian Splatting [30.321151430263946]
コンテンツアラインな参照画像に基づいて外観を編集する参照ベースシーンスタイリングは、新たな研究領域である。
参照型スタイリゼーションに3Dガウススティング(3DGS)を適用し,リアルタイムなスタイリゼーションを実現するReGSを提案する。
論文 参考訳(メタデータ) (2024-07-09T20:30:29Z) - Relightable 3D Gaussians: Realistic Point Cloud Relighting with BRDF Decomposition and Ray Tracing [21.498078188364566]
フォトリアリスティックなリライトを実現するために,新しい微分可能な点ベースレンダリングフレームワークを提案する。
提案したフレームワークは、メッシュベースのグラフィクスパイプラインを、編集、トレース、リライトを可能にするポイントベースのパイプラインで革新する可能性を示している。
論文 参考訳(メタデータ) (2023-11-27T18:07:58Z) - GS-IR: 3D Gaussian Splatting for Inverse Rendering [71.14234327414086]
3次元ガウス散乱(GS)に基づく新しい逆レンダリング手法GS-IRを提案する。
我々は、未知の照明条件下で撮影された多視点画像からシーン形状、表面物質、環境照明を推定するために、新しいビュー合成のための最高のパフォーマンス表現であるGSを拡張した。
フレキシブルかつ表現力のあるGS表現は、高速かつコンパクトな幾何再構成、フォトリアリスティックな新規ビュー合成、有効物理ベースレンダリングを実現する。
論文 参考訳(メタデータ) (2023-11-26T02:35:09Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。