論文の概要: Removing Diffraction Image Artifacts in Under-Display Camera via Dynamic
Skip Connection Network
- arxiv url: http://arxiv.org/abs/2104.09556v1
- Date: Mon, 19 Apr 2021 18:41:45 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-21 13:31:17.746752
- Title: Removing Diffraction Image Artifacts in Under-Display Camera via Dynamic
Skip Connection Network
- Title(参考訳): ダイナミックスキップ接続ネットワークによるディスプレイ下カメラの回折画像の除去
- Authors: Ruicheng Feng, Chongyi Li, Huaijin Chen, Shuai Li, Chen Change Loy,
Jinwei Gu
- Abstract要約: アンダーディスプレイカメラ(UDC)システムは、スマートフォン上で真のベゼルレスおよびノッチフリーの視聴体験を提供します。
典型的なUDCシステムでは、ピクセルアレイはカメラ上の入射光を減衰および回折し、画像品質の大幅な低下をもたらす。
本研究では,前述の劣化問題の解析と対処を目的とする。
- 参考スコア(独自算出の注目度): 80.67717076541956
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Recent development of Under-Display Camera (UDC) systems provides a true
bezel-less and notch-free viewing experience on smartphones (and TV, laptops,
tablets), while allowing images to be captured from the selfie camera embedded
underneath. In a typical UDC system, the microstructure of the semi-transparent
organic light-emitting diode (OLED) pixel array attenuates and diffracts the
incident light on the camera, resulting in significant image quality
degradation. Oftentimes, noise, flare, haze, and blur can be observed in UDC
images. In this work, we aim to analyze and tackle the aforementioned
degradation problems. We define a physics-based image formation model to better
understand the degradation. In addition, we utilize one of the world's first
commodity UDC smartphone prototypes to measure the real-world Point Spread
Function (PSF) of the UDC system, and provide a model-based data synthesis
pipeline to generate realistically degraded images. We specially design a new
domain knowledge-enabled Dynamic Skip Connection Network (DISCNet) to restore
the UDC images. We demonstrate the effectiveness of our method through
extensive experiments on both synthetic and real UDC data. Our physics-based
image formation model and proposed DISCNet can provide foundations for further
exploration in UDC image restoration, and even for general diffraction artifact
removal in a broader sense.
- Abstract(参考訳): 最近のudc(under-display camera)システムの開発は、スマートフォン(およびテレビ、ラップトップ、タブレット)でベゼルなしでノッチなしの視聴体験を提供し、下に埋め込まれた自撮りカメラから画像を撮影することができる。
典型的なudcシステムでは、半透明有機発光ダイオード(oled)画素アレイの微細構造がカメラの入射光を減衰させ拡散させ、画質を著しく低下させる。
udc画像では、しばしば、ノイズ、フレア、ヘイズ、ぼやけが観察される。
本研究では, 上記の劣化問題を分析し, 対処することを目的とする。
劣化をよりよく理解するために物理ベースの画像形成モデルを定義する。
また,世界初となる市販のudcスマートフォンプロトタイプの1つを用いて,udcシステムの実世界の点拡散関数(psf)を計測し,現実的に劣化した画像を生成するモデルベースデータ合成パイプラインを提供する。
UDC画像の復元のために,新しいドメイン知識対応動的スキップ接続ネットワーク(DISCNet)を設計する。
提案手法の有効性を, 合成および実 UDC データの広範囲な実験により実証する。
我々の物理ベースの画像形成モデルと提案するディスクネットは、udc画像復元のさらなる探索や、より広い意味での一般的な回折アーティファクト除去の基礎を提供することができる。
関連論文リスト
- Segmentation Guided Sparse Transformer for Under-Display Camera Image
Restoration [91.65248635837145]
Under-Display Camera(UDC)は、ディスプレイパネルの下にカメラを隠してフルスクリーン表示を実現する新興技術である。
本稿では,UDC 画像復元に Vision Transformer を用いることで,大量の冗長情報やノイズを大域的注目度で検出する。
UDC劣化画像から高品質な画像を復元するためのガイドスパース変換器(SGSFormer)を提案する。
論文 参考訳(メタデータ) (2024-03-09T13:11:59Z) - DGNet: Dynamic Gradient-Guided Network for Water-Related Optics Image
Enhancement [77.0360085530701]
水中画像強調(UIE)は、水中環境によって引き起こされる複雑な劣化のために難しい課題である。
従来の手法では、劣化過程を理想化し、中音や物体の動きが画像の特徴の分布に与える影響を無視することが多い。
提案手法では,予測画像を用いて疑似ラベルを動的に更新し,動的勾配を加えてネットワークの勾配空間を最適化する。
論文 参考訳(メタデータ) (2023-12-12T06:07:21Z) - Deep Video Restoration for Under-Display Camera [98.17505013737446]
本稿では,現実的な UDC 劣化過程をシミュレートする GAN ベースの生成パイプラインを提案する。
我々は PexelsUDC という,最初の大規模 UDC ビデオ復元データセットを構築した。
本稿では,動画の劣化を適応的に改善するトランスフォーマーベースライン手法を提案する。
論文 参考訳(メタデータ) (2023-09-09T10:48:06Z) - Enhancing Low-light Light Field Images with A Deep Compensation Unfolding Network [52.77569396659629]
本稿では,低光環境下で撮像した光場(LF)画像の復元に,DCUNet(Deep compensation network openfolding)を提案する。
このフレームワークは、中間拡張結果を使用して照明マップを推定し、展開プロセスで新しい拡張結果を生成する。
本稿では,LF画像の特徴を適切に活用するために,擬似明示的特徴相互作用モジュールを提案する。
論文 参考訳(メタデータ) (2023-08-10T07:53:06Z) - Physics-Driven Turbulence Image Restoration with Stochastic Refinement [80.79900297089176]
大気乱流による画像歪みは、長距離光学画像システムにおいて重要な問題である。
ディープラーニングモデルが現実世界の乱流条件に適応するために、高速で物理学的なシミュレーションツールが導入された。
本稿では,物理統合復元ネットワーク(PiRN)を提案する。
論文 参考訳(メタデータ) (2023-07-20T05:49:21Z) - Modular Degradation Simulation and Restoration for Under-Display Camera [21.048590332029995]
ディスプレイ下カメラ(UDC)はフルスクリーンスマートフォンにエレガントなソリューションを提供する。
UDCが撮影した画像は、センサーがディスプレイの下に置かれているため、深刻な劣化に悩まされている。
UDC画像のシミュレーションにGAN(Generative Adversarial Network)フレームワークを用いたMPGNetと呼ばれるモジュラーネットワークを提案する。
論文 参考訳(メタデータ) (2022-09-23T07:36:07Z) - UDC-UNet: Under-Display Camera Image Restoration via U-Shape Dynamic
Network [13.406025621307132]
Under-Display Camera(UDC)は、スマートフォンがフルスクリーンディスプレイを実現するのを助けるために広く利用されている。
スクリーンは必然的に光伝播プロセスに影響を与えるため、UDCシステムによって撮影された画像にはフレア、ヘイズ、ぼかし、ノイズが含まれている。
本稿では、HDRシーンにおける既知のポイントスプレッド機能(PSF)を用いて、UDC画像復元問題に対処する新しいディープモデル、UDC-UNetを提案する。
論文 参考訳(メタデータ) (2022-09-05T07:41:44Z) - Transform Domain Pyramidal Dilated Convolution Networks For Restoration
of Under Display Camera Images [6.731863717520707]
アンダーディスプレイカメラ(UDC)は、ハンドヘルドデバイスでデジタル画像体験をシームレスにする新しい技術である。
UDC画像はディスプレイ画面下の位置によって著しく劣化する。
この研究は、UDCイメージングの結果劣化した画像の復元に対処する。
論文 参考訳(メタデータ) (2020-09-20T09:26:10Z) - Deep Atrous Guided Filter for Image Restoration in Under Display Cameras [18.6418313982586]
ディスプレイカメラの下では、カメラを半透明のOLEDスクリーンの後ろに配置することで、ベゼルのないディスプレイを実現することができる。
このようなイメージングシステムは、光の減衰と回折効果による画像劣化に悩まされる。
UDCシステムにおける画像復元のための2段階のエンド・ツー・エンドアプローチであるDeep Atrous Guided Filter(DAGF)を提案する。
論文 参考訳(メタデータ) (2020-08-14T07:54:52Z) - Image Restoration for Under-Display Camera [14.209602483950322]
フルスクリーンデバイスの新たなトレンドは、私たちはスクリーンの後ろにカメラを置くことを奨励します。
ベゼルを外し、画面下にカメラを集中させると、ディスプレイとボディの比率が大きくなり、ビデオチャットではアイコンタクトが強化されるが、画像の劣化も引き起こす。
本稿では,新たに定義されたUnder-Display Camera (UDC) に焦点をあてる。
論文 参考訳(メタデータ) (2020-03-10T17:09:00Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。