論文の概要: Bokeh-Loss GAN: Multi-Stage Adversarial Training for Realistic
Edge-Aware Bokeh
- arxiv url: http://arxiv.org/abs/2208.12343v1
- Date: Thu, 25 Aug 2022 20:57:07 GMT
- ステータス: 処理完了
- システム内更新日: 2022-08-29 13:25:49.903211
- Title: Bokeh-Loss GAN: Multi-Stage Adversarial Training for Realistic
Edge-Aware Bokeh
- Title(参考訳): Bokeh-Loss GAN: 現実的なエッジ対応Bokehのためのマルチステージ逆トレーニング
- Authors: Brian Lee, Fei Lei, Huaijin Chen, and Alexis Baudron
- Abstract要約: 我々は単分子ボケ合成の問題に取り組み、単一のオールインフォーカス画像から被写界画像の浅い深さを描画しようと試みる。
DSLRカメラとは異なり、この効果は移動体開口の物理的制約のため、移動体カメラでは直接キャプチャできない。
本稿では,単一の画像入力から現実的なモノクロボケをレンダリングできるネットワークベースのアプローチを提案する。
- 参考スコア(独自算出の注目度): 3.8811606213997587
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: In this paper, we tackle the problem of monocular bokeh synthesis, where we
attempt to render a shallow depth of field image from a single all-in-focus
image. Unlike in DSLR cameras, this effect can not be captured directly in
mobile cameras due to the physical constraints of the mobile aperture. We thus
propose a network-based approach that is capable of rendering realistic
monocular bokeh from single image inputs. To do this, we introduce three new
edge-aware Bokeh Losses based on a predicted monocular depth map, that sharpens
the foreground edges while blurring the background. This model is then
finetuned using an adversarial loss to generate a realistic Bokeh effect.
Experimental results show that our approach is capable of generating a
pleasing, natural Bokeh effect with sharp edges while handling complicated
scenes.
- Abstract(参考訳): 本稿では,単眼ボケ合成の課題に取り組み,単眼ボケ合成において,一つの全焦点像から浅い被写界深度を描画することを試みる。
DSLRカメラとは異なり、この効果は移動体開口の物理的制約のため、モバイルカメラで直接キャプチャすることはできない。
そこで本研究では,単一の画像入力から現実的な単眼ボケを描画できるネットワークベースアプローチを提案する。
そこで本研究では,予測した単眼深度マップに基づくエッジアウェアボケロスを3つ導入し,背景をぼやけながら前景エッジを研ぎ取る。
このモデルを逆損失を用いて微調整し、現実的なボケ効果を生成する。
実験の結果, 複雑なシーンを処理しながら, 鋭いエッジで自然ボケ効果を生み出すことができることがわかった。
関連論文リスト
- ExBluRF: Efficient Radiance Fields for Extreme Motion Blurred Images [58.24910105459957]
極端運動ぼかし画像の新しいビュー合成法であるExBluRFを提案する。
提案手法は,6-DOFカメラトラジェクトリをベースとしたモーションブラー定式化と,ボクセルをベースとした放射場からなる。
既存の作業と比較して、トレーニング時間とGPUメモリ使用量の10倍の順序で、よりシャープな3Dシーンを復元する。
論文 参考訳(メタデータ) (2023-09-16T11:17:25Z) - Adaptive Window Pruning for Efficient Local Motion Deblurring [81.35217764881048]
局所的な動きのぼかしは、露光中の移動物体と静止背景との混合により、実世界の写真で一般的に発生する。
既存の画像のデブロアリング手法は主にグローバルなデブロアリングに焦点を当てている。
本稿では,高解像度の局所的ぼやけた画像を適応的かつ効率的に復元することを目的とする。
論文 参考訳(メタデータ) (2023-06-25T15:24:00Z) - BokehOrNot: Transforming Bokeh Effect with Image Transformer and Lens
Metadata Embedding [2.3784282912975345]
Bokeh効果(ボケエフェクト、英: Bokeh effect)は、広角レンズを備えたハイエンドカメラが生み出す、快適な視覚体験を提供する光学現象である。
本稿では,このモデルにレンズメタデータを埋め込み,アルファマスクを用いた損失計算手法を提案する。
以上の手法に基づいて,ブラープ・トゥ・シャープとシャープ・トゥ・ブルーのボケ効果を両立できるボケオルノットモデルを提案する。
論文 参考訳(メタデータ) (2023-06-06T21:49:56Z) - WildLight: In-the-wild Inverse Rendering with a Flashlight [77.31815397135381]
本研究では、未知の環境光下での逆レンダリングのための実用的な測光ソリューションを提案する。
本システムは,スマートフォンで撮影した多視点画像のみを用いて,シーン形状と反射率を復元する。
提案手法は実装が容易で,セットアップも容易で,既存の逆レンダリング技術よりも一貫して優れていることを示す。
論文 参考訳(メタデータ) (2023-03-24T17:59:56Z) - Bokeh Rendering Based on Adaptive Depth Calibration Network [13.537088629080122]
ボケレンダリングは、美的な効果を生み出すために写真で使われる一般的なテクニックである。
携帯電話では、フィールドの浅い写真は撮れません。
本稿では,最新の強力なディープラーニングアーキテクチャであるVision Transformerを用いたボケレンダリング手法を提案する。
論文 参考訳(メタデータ) (2023-02-21T16:33:51Z) - Realistic Bokeh Effect Rendering on Mobile GPUs, Mobile AI & AIM 2022
challenge: Report [75.79829464552311]
この課題は、最新のスマートフォンモデルで実行できる効率的なエンドツーエンドのAIベースのレンダリングアプローチを開発することだった。
得られたモデルはKirin 9000のMali GPUで評価され、多くのディープラーニングオプティマスに対して優れた加速結果が得られた。
論文 参考訳(メタデータ) (2022-11-07T22:42:02Z) - AIM 2020 Challenge on Rendering Realistic Bokeh [95.87775182820518]
本稿では,第2回AIM現実ボケ効果レンダリングチャレンジをレビューする。
目標は、大規模なESB! bokehデータセットを使用して、現実的な浅いフォーカステクニックを学ぶことだった。
参加者は、他のカメラやセンサーからの追加データなしで、単一のフレームのみに基づいてボケ効果をレンダリングしなければならなかった。
論文 参考訳(メタデータ) (2020-11-10T09:15:38Z) - BGGAN: Bokeh-Glass Generative Adversarial Network for Rendering
Realistic Bokeh [19.752904494597328]
本稿では,複雑なハードウェアに依存しないボケ画像を生成するGlass-Netという新しいジェネレータを提案する。
実験の結果,この方法は高品質なボケ効果を示し,全スマートフォンチップセットで1.9秒で1,1024倍の1536$の画像を処理可能であることがわかった。
論文 参考訳(メタデータ) (2020-11-04T11:56:34Z) - Rendering Natural Camera Bokeh Effect with Deep Learning [95.86933125733673]
ボケ(Bokeh)は、写真に焦点をあてる重要な芸術効果である。
モバイルカメラは、光学の直径が非常に小さいため、被写界深度が浅い写真を作ることができない。
本稿では,デジタル一眼レフカメラで撮影された写真から直接,現実的な浅層焦点技術を学ぶことを提案する。
論文 参考訳(メタデータ) (2020-06-10T07:28:06Z) - Depth-aware Blending of Smoothed Images for Bokeh Effect Generation [10.790210744021072]
本稿では,画像から高品質なボケ効果を生成するために,エンドツーエンドのディープラーニングフレームワークを提案する。
ネットワークは軽量で、HD画像を0.03秒で処理できる。
このアプローチは、AIM 2019 Bokeh effect Challenge-Perceptual Trackで2位にランクインした。
論文 参考訳(メタデータ) (2020-05-28T18:11:05Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。