論文の概要: Flash-Splat: 3D Reflection Removal with Flash Cues and Gaussian Splats
- arxiv url: http://arxiv.org/abs/2410.02764v1
- Date: Thu, 3 Oct 2024 17:59:59 GMT
- ステータス: 処理完了
- システム内更新日: 2024-11-03 06:04:22.250518
- Title: Flash-Splat: 3D Reflection Removal with Flash Cues and Gaussian Splats
- Title(参考訳): Flash-Splat: Flash Cues と Gaussian Splats による3次元反射除去
- Authors: Mingyang Xie, Haoming Cai, Sachin Shah, Yiran Xu, Brandon Y. Feng, Jia-Bin Huang, Christopher A. Metzler,
- Abstract要約: 透過光と反射光を分離する簡単な方法を提案する。
提案手法であるFlash-Splatは,3次元の伝送シーンと反射シーンの両方を正確に再構成する。
- 参考スコア(独自算出の注目度): 13.27784783829039
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We introduce a simple yet effective approach for separating transmitted and reflected light. Our key insight is that the powerful novel view synthesis capabilities provided by modern inverse rendering methods (e.g.,~3D Gaussian splatting) allow one to perform flash/no-flash reflection separation using unpaired measurements -- this relaxation dramatically simplifies image acquisition over conventional paired flash/no-flash reflection separation methods. Through extensive real-world experiments, we demonstrate our method, Flash-Splat, accurately reconstructs both transmitted and reflected scenes in 3D. Our method outperforms existing 3D reflection separation methods, which do not leverage illumination control, by a large margin. Our project webpage is at https://flash-splat.github.io/.
- Abstract(参考訳): 透過光と反射光を分離する簡単な方法を提案する。
我々の重要な洞察は、現代の逆レンダリング手法(例えば、3Dガウススプラッティング)によって提供される強力な新しいビュー合成機能によって、不対計測を用いてフラッシュ/ノ・フラッシュリフレクション分離を行うことができます -- この緩和により、従来のフラッシュ/ノ・フラッシュリフレクション分離法よりも画像の取得が劇的に簡単になるということです。
実世界の広範囲にわたる実験を通じて,3次元の映像と映像の両方を正確に再構成するFlash-Splatを実証した。
本手法は照明制御を行なわない既存の3次元反射分離法よりも大きなマージンで優れる。
プロジェクトのWebページはhttps://flash-splat.github.io/です。
関連論文リスト
- IllumiNeRF: 3D Relighting Without Inverse Rendering [25.642960820693947]
対象の環境光と推定対象形状を条件とした画像拡散モデルを用いて,各入力画像をリライトする方法を示す。
ニューラル・レージアンス・フィールド (NeRF) をこれらの信頼された画像で再構成し, 対象光の下で新しいビューを描画する。
この戦略は驚くほど競争力があり、複数のリライトベンチマークで最先端の結果が得られることを実証する。
論文 参考訳(メタデータ) (2024-06-10T17:59:59Z) - Towards Flexible Interactive Reflection Removal with Human Guidance [75.38207315080624]
単一の画像反射除去は本質的に不明瞭であり、分離を必要とする反射成分と透過成分の両方が自然な画像統計に従う可能性がある。
既存の手法では、様々な種類の低レベルおよび物理ベースのキューを反射信号の源として利用することでこの問題に対処しようとする。
本稿では,様々な形態のスパース・ヒューマン・ガイダンスを活用するフレキシブル・インタラクティブ・リフレクション・リフレクション・リフレクション・リフレクション・リジェクション・リジェクション・アプローチを提案する。
論文 参考訳(メタデータ) (2024-06-03T17:34:37Z) - Relightify: Relightable 3D Faces from a Single Image via Diffusion
Models [86.3927548091627]
単一画像からの3次元顔BRDF再構成を高精度に行うために,拡散モデルを用いた最初のアプローチを提案する。
既存の手法とは対照的に,観測されたテクスチャを直接入力画像から取得することで,より忠実で一貫した推定が可能となる。
論文 参考訳(メタデータ) (2023-05-10T11:57:49Z) - WildLight: In-the-wild Inverse Rendering with a Flashlight [77.31815397135381]
本研究では、未知の環境光下での逆レンダリングのための実用的な測光ソリューションを提案する。
本システムは,スマートフォンで撮影した多視点画像のみを用いて,シーン形状と反射率を復元する。
提案手法は実装が容易で,セットアップも容易で,既存の逆レンダリング技術よりも一貫して優れていることを示す。
論文 参考訳(メタデータ) (2023-03-24T17:59:56Z) - Robust Reflection Removal with Flash-only Cues in the Wild [88.13531903652526]
一対のフラッシュと周囲(非フラッシュ)画像から頑健な反射除去のための反射除去キューを提案する。
提案手法はPSNRにおいて5.23dB以上の反射除去手法より優れる。
我々は、フラッシュと非フラッシュのペア間の不整合に対処するために、ハンドヘルド写真へのアプローチを拡張した。
論文 参考訳(メタデータ) (2022-11-05T14:09:10Z) - Seeing Far in the Dark with Patterned Flash [5.540878289831889]
遠距離でのフラッシュイメージングのための新しいフラッシュ技術「パターンフラッシュ」を提案する。
パターンフラッシュは光電力をドットアレイに集中させる。
畳み込みニューラルネットワークを用いた画像再構成と深度推定アルゴリズムを開発した。
論文 参考訳(メタデータ) (2022-07-25T23:16:50Z) - Robust Reflection Removal with Reflection-free Flash-only Cues [52.46297802064146]
一対のフラッシュと周囲(非フラッシュ)画像から頑健な反射除去のための反射除去キューを提案する。
提案手法はPSNRでは5.23dB,SSIMでは0.04,LPIPSでは0.068以上の反射除去手法より優れていた。
論文 参考訳(メタデータ) (2021-03-07T05:27:43Z) - Deep Denoising of Flash and No-Flash Pairs for Photography in Low-Light
Environments [51.74566709730618]
低照度環境下でのフラッシュの有無にかかわらず、高速連続で撮影された画像のペアをデノイズするニューラルネットワークベースの方法を紹介します。
私たちの目標は、ノイズの多いノーフラッシュ画像の周囲照明から色と気分を維持するシーンの高品質のレンダリングを作成することです。
論文 参考訳(メタデータ) (2020-12-09T15:41:16Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。