論文の概要: MaterialRefGS: Reflective Gaussian Splatting with Multi-view Consistent Material Inference
- arxiv url: http://arxiv.org/abs/2510.11387v1
- Date: Mon, 13 Oct 2025 13:29:20 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-10-14 18:06:30.375278
- Title: MaterialRefGS: Reflective Gaussian Splatting with Multi-view Consistent Material Inference
- Title(参考訳): MaterialRefGS:多視点整合性材料推論を用いた反射型ガウス散乱
- Authors: Wenyuan Zhang, Jimin Tang, Weiqi Zhang, Yi Fang, Yu-Shen Liu, Zhizhong Han,
- Abstract要約: より物理的な環境モデルを用いた多視点一貫した物質推定がガウススプラッティングによる正確な反射の学習の鍵となることを示す。
本手法は照明と幾何学の両方を忠実に復元し,新しいビュー合成における最先端のレンダリング品質を実現する。
- 参考スコア(独自算出の注目度): 83.38607296779423
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Modeling reflections from 2D images is essential for photorealistic rendering and novel view synthesis. Recent approaches enhance Gaussian primitives with reflection-related material attributes to enable physically based rendering (PBR) with Gaussian Splatting. However, the material inference often lacks sufficient constraints, especially under limited environment modeling, resulting in illumination aliasing and reduced generalization. In this work, we revisit the problem from a multi-view perspective and show that multi-view consistent material inference with more physically-based environment modeling is key to learning accurate reflections with Gaussian Splatting. To this end, we enforce 2D Gaussians to produce multi-view consistent material maps during deferred shading. We also track photometric variations across views to identify highly reflective regions, which serve as strong priors for reflection strength terms. To handle indirect illumination caused by inter-object occlusions, we further introduce an environment modeling strategy through ray tracing with 2DGS, enabling photorealistic rendering of indirect radiance. Experiments on widely used benchmarks show that our method faithfully recovers both illumination and geometry, achieving state-of-the-art rendering quality in novel views synthesis.
- Abstract(参考訳): 2次元画像からの反射をモデル化することは、フォトリアリスティックなレンダリングと新しいビュー合成に不可欠である。
最近のアプローチでは、ガウス原始体を反射関連物質属性で拡張し、ガウススプラッティングによる物理ベースレンダリング(PBR)を可能にしている。
しかし、物質推論は、特に限られた環境モデルの下では十分な制約を欠くことが多く、照明のエイリアス化と一般化の低減をもたらす。
本研究では,多視点からの問題を再考し,より物理的に環境モデルを用いた多視点一貫した物質推論がガウススプラッティングによる正確なリフレクションの学習の鍵となることを示す。
この目的のために、2次元ガウスアンを強制して、遅延シェーディング中に多視点一貫した物質マップを作成する。
また、反射強度項の強い先行となる高反射領域を特定するために、ビュー間での光度変動も追跡する。
物体間閉塞による間接照明に対処するため,2DGSを用いた光トレーシングによる環境モデリング手法を導入し,間接放射の光リアルレンダリングを可能にする。
提案手法は照明と幾何学の両方を忠実に復元し,新しいビュー合成における最先端のレンダリング品質を実現する。
関連論文リスト
- GOGS: High-Fidelity Geometry and Relighting for Glossy Objects via Gaussian Surfels [0.9392167468538465]
RGB画像からの光沢のある物体の逆レンダリングは、本質的には固有の曖昧さによって制限されている。
2次元ガウス波をベースとした新しい2段階フレームワークGOGSを提案する。
我々は、新しい照明下での幾何再構成、物質分離、光リアルリライティングにおける最先端性能を実証する。
論文 参考訳(メタデータ) (2025-08-20T09:35:40Z) - MV-CoLight: Efficient Object Compositing with Consistent Lighting and Shadow Generation [19.46962637673285]
MV-CoLightは2Dおよび3Dシーンで合成される照度一貫性のあるオブジェクトのためのフレームワークである。
2次元画像入力と3次元ガウスシーン表現をシームレスに整列するために、ヒルベルト曲線に基づく写像を用いる。
実験では、標準ベンチマークとデータセット間で、最先端の調和した結果を実証した。
論文 参考訳(メタデータ) (2025-05-27T17:53:02Z) - Reflective Gaussian Splatting [36.111845416439095]
本稿では2つの成分を特徴とする反射ガウススプラッティング(Ref-Gaussian)フレームワークを提案する。
Ref-Gaussianは、定量的メトリクス、視覚的品質、計算効率の点で、既存のアプローチを超越している。
また、Ref-Gaussianは、リライトや編集など、より多くのアプリケーションをサポートしています。
論文 参考訳(メタデータ) (2024-12-26T16:58:35Z) - EnvGS: Modeling View-Dependent Appearance with Environment Gaussian [78.74634059559891]
EnvGSは、環境の反射を捉えるための明示的な3D表現として、ガウスプリミティブのセットを利用する新しいアプローチである。
これらの環境を効率的にレンダリングするために,高速レンダリングにGPUのRTコアを利用するレイトレーシングベースのリフレクションを開発した。
複数の実世界および合成データセットから得られた結果は,本手法がより詳細な反射を生成することを示す。
論文 参考訳(メタデータ) (2024-12-19T18:59:57Z) - IDArb: Intrinsic Decomposition for Arbitrary Number of Input Views and Illuminations [64.07859467542664]
画像から幾何学的および物質的情報をキャプチャすることは、コンピュータビジョンとグラフィックスの基本的な課題である。
従来の最適化に基づく手法では、密集した多視点入力から幾何学、材料特性、環境照明を再構築するために数時間の計算時間を必要とすることが多い。
IDArbは、様々な照明条件下で、任意の画像に対して本質的な分解を行うために設計された拡散モデルである。
論文 参考訳(メタデータ) (2024-12-16T18:52:56Z) - MetaGS: A Meta-Learned Gaussian-Phong Model for Out-of-Distribution 3D Scene Relighting [63.5925701087252]
アウト・オブ・ディストリビューション(OOD) 3Dリライティングは、目に見えない照明条件下での新しいビュー合成を必要とする。
この課題に対処するためにMetaGSを2つの視点から紹介する。
論文 参考訳(メタデータ) (2024-05-31T13:48:54Z) - NeFII: Inverse Rendering for Reflectance Decomposition with Near-Field
Indirect Illumination [48.42173911185454]
逆レンダリング手法は、多視点RGB画像から幾何学、材料、照明を推定することを目的としている。
本稿では,多視点画像から材料と照明を分解するエンドツーエンドの逆レンダリングパイプラインを提案する。
論文 参考訳(メタデータ) (2023-03-29T12:05:19Z) - DIB-R++: Learning to Predict Lighting and Material with a Hybrid
Differentiable Renderer [78.91753256634453]
そこで本研究では,単体画像から固有物体特性を推定する難題について,微分可能量を用いて検討する。
そこで本研究では、スペクトル化とレイトレーシングを組み合わせることで、これらの効果をサポートするハイブリッド微分可能なDIBR++を提案する。
より高度な物理ベースの微分可能値と比較すると、DIBR++はコンパクトで表現力のあるモデルであるため、高い性能を持つ。
論文 参考訳(メタデータ) (2021-10-30T01:59:39Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。