論文の概要: Revisiting Single Image Reflection Removal In the Wild
- arxiv url: http://arxiv.org/abs/2311.17320v1
- Date: Wed, 29 Nov 2023 02:31:10 GMT
- ステータス: 処理完了
- システム内更新日: 2023-11-30 22:53:38.495350
- Title: Revisiting Single Image Reflection Removal In the Wild
- Title(参考訳): 野生での単一画像の反射除去の再検討
- Authors: Yurui Zhu, Xueyang Fu, Peng-Tao Jiang, Hao Zhang, Qibin Sun, Jinwei
Chen, Zheng-Jun Zha, Bo Li
- Abstract要約: 本研究は,実環境におけるシングルイメージリフレクション除去(SIRR)の問題に焦点をあてる。
我々は,様々な現実世界のリフレクションシナリオに高度に適用可能な,高度なリフレクション収集パイプラインを考案した。
野生での反射除去(RRW)と呼ばれる大規模で高品質な反射データセットを開発する。
- 参考スコア(独自算出の注目度): 83.42368937164473
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: This research focuses on the issue of single-image reflection removal (SIRR)
in real-world conditions, examining it from two angles: the collection pipeline
of real reflection pairs and the perception of real reflection locations. We
devise an advanced reflection collection pipeline that is highly adaptable to a
wide range of real-world reflection scenarios and incurs reduced costs in
collecting large-scale aligned reflection pairs. In the process, we develop a
large-scale, high-quality reflection dataset named Reflection Removal in the
Wild (RRW). RRW contains over 14,950 high-resolution real-world reflection
pairs, a dataset forty-five times larger than its predecessors. Regarding
perception of reflection locations, we identify that numerous virtual
reflection objects visible in reflection images are not present in the
corresponding ground-truth images. This observation, drawn from the aligned
pairs, leads us to conceive the Maximum Reflection Filter (MaxRF). The MaxRF
could accurately and explicitly characterize reflection locations from pairs of
images. Building upon this, we design a reflection location-aware cascaded
framework, specifically tailored for SIRR. Powered by these innovative
techniques, our solution achieves superior performance than current leading
methods across multiple real-world benchmarks. Codes and datasets will be
publicly available.
- Abstract(参考訳): 本研究は、実空間における単一像反射除去(SIRR)の問題に焦点を当て、実反射対の収集パイプラインと実反射位置の知覚という2つの角度から検討する。
幅広い実世界のリフレクションシナリオに高度に適応可能な高度なリフレクションコレクションパイプラインを考案し,大規模なリフレクションペアの収集に要するコストを削減した。
この過程で我々は,RW(Reflection removal in the Wild)と呼ばれる大規模かつ高品質な反射データセットを開発した。
RRWには14,950個の高解像度の現実世界反射対があり、これは前世代より45倍大きいデータセットである。
反射位置の知覚について,反射画像に現れる多数の仮想反射物体が,対応する地対面画像に存在しないことを明らかにする。
この観測は、整列対から導かれ、最大反射フィルタ(MaxRF)を導出する。
MaxRFは2枚の画像から反射位置を正確に的確に特徴付けることができる。
これに基づいて,我々はSIRRに適したリフレクション位置対応カスケードフレームワークを設計する。
これらの革新的手法を駆使して,本ソリューションは,実世界の複数のベンチマークにおいて,現在の先行手法よりも優れた性能を実現する。
コードとデータセットが公開される。
関連論文リスト
- Planar Reflection-Aware Neural Radiance Fields [32.709468082010126]
我々は、窓などの平面反射体を共同でモデル化し、反射光を明示的に鋳造して高周波反射源を捉える反射型NeRFを提案する。
一次光線に沿ってレンダリングすると、きれいで反射のないビューとなり、一方、反射光線に沿って明示的にレンダリングすることで、非常に詳細な反射を再構成することができる。
論文 参考訳(メタデータ) (2024-11-07T18:55:08Z) - Monocular Identity-Conditioned Facial Reflectance Reconstruction [71.90507628715388]
既存の方法は、顔の反射率モデルを学ぶために、大量の光ステージキャプチャーデータに依存している。
我々は、UV空間ではなく画像空間で反射率を学習し、ID2Reflectanceというフレームワークを提案する。
本フレームワークは,訓練に限られた反射率データを用いながら,単一の画像の反射率マップを直接推定することができる。
論文 参考訳(メタデータ) (2024-03-30T09:43:40Z) - Single Image Reflection Removal with Reflection Intensity Prior
Knowledge [14.335849624907611]
本稿では、反射現象の強度を捉えるための一般的な反射強度を提案する。
画像の領域パッチへの分割により、RPENは画像に先立って一様でない反射を学習する。
本稿では, 単純なトランスフォーマU-Netアーキテクチャを用いて, プリエントベース反射除去ネットワーク(PRRN)を提案する。
論文 参考訳(メタデータ) (2023-12-06T14:52:11Z) - A Categorized Reflection Removal Dataset with Diverse Real-world Scenes [54.662456878340215]
我々は、分類され、多様で、現実世界(CDR)に分類された新しい反射除去データセットを構築する。
データセットは様々な環境下で様々なガラスタイプを使用して構築され、多様性が保証される。
現状の反射除去法は, 一般にぼやけた反射に対して良好に機能するが, 他の種類の実世界の反射に対する満足度は得られないことを示す。
論文 参考訳(メタデータ) (2021-08-07T06:56:57Z) - ReflectNet -- A Generative Adversarial Method for Single Image
Reflection Suppression [0.6980076213134382]
本稿では,文脈理解モジュールと敵対的学習に基づく単一の画像反射除去手法を提案する。
提案手法は,PSNR と SSIM の観点から,SIR のベンチマークデータセット上で,最先端の手法よりも優れる。
論文 参考訳(メタデータ) (2021-05-11T17:33:40Z) - Two-Stage Single Image Reflection Removal with Reflection-Aware Guidance [78.34235841168031]
シングルイメージリフレクション除去(SIRR)のためのリフレクション・アウェア・ガイダンス(RAGNet)を用いた新しい2段階ネットワークを提案する。
RAGは、(i)観測からの反射の効果を緩和するために、(ii)線形結合仮説から逸脱する効果を緩和するための部分畳み込みにおいてマスクを生成するために用いられる。
5つの一般的なデータセットの実験は、最先端のSIRR法と比較して、RAGNetの量的および質的な優位性を実証している。
論文 参考訳(メタデータ) (2020-12-02T03:14:57Z) - Polarized Reflection Removal with Perfect Alignment in the Wild [66.48211204364142]
野生の偏光画像からの反射を除去するための新しい定式化法を提案する。
まず、既存のリフレクション除去データセットの不整合問題を同定する。
我々は100種類以上のガラスを用いた新しいデータセットを構築し、得られた透過画像は入力された混合画像と完全に一致している。
論文 参考訳(メタデータ) (2020-03-28T13:29:31Z) - Single image reflection removal via learning with multi-image
constraints [50.54095311597466]
本稿では、上記のアプローチの利点を組み合わせ、その欠点を克服する新しい学習ベースソリューションを提案する。
提案アルゴリズムはディープニューラルネットワークを学習して、複数の入力画像間で強化されたジョイント制約でターゲットを最適化する。
我々のアルゴリズムは実画像上でリアルタイムかつ最先端の反射除去性能で動作する。
論文 参考訳(メタデータ) (2019-12-08T06:10:49Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。