論文の概要: LTT-GAN: Looking Through Turbulence by Inverting GANs
- arxiv url: http://arxiv.org/abs/2112.02379v1
- Date: Sat, 4 Dec 2021 16:42:13 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-07 16:37:31.495481
- Title: LTT-GAN: Looking Through Turbulence by Inverting GANs
- Title(参考訳): LTT-GAN: GANの反転による乱流観測
- Authors: Kangfu Mei and Vishal M. Patel
- Abstract要約: 本稿では,よく訓練されたGANによってカプセル化された視覚的事前情報を利用した最初の乱流緩和手法を提案する。
視覚的先行性に基づき、周期的な文脈距離で復元された画像の同一性を維持することを学ぶことを提案する。
本手法は, 回復した結果の視覚的品質と顔認証精度の両方において, 先行技術よりも優れていた。
- 参考スコア(独自算出の注目度): 86.25869403782957
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In many applications of long-range imaging, we are faced with a scenario
where a person appearing in the captured imagery is often degraded by
atmospheric turbulence. However, restoring such degraded images for face
verification is difficult since the degradation causes images to be
geometrically distorted and blurry. To mitigate the turbulence effect, in this
paper, we propose the first turbulence mitigation method that makes use of
visual priors encapsulated by a well-trained GAN. Based on the visual priors,
we propose to learn to preserve the identity of restored images on a spatial
periodic contextual distance. Such a distance can keep the realism of restored
images from the GAN while considering the identity difference at the network
learning. In addition, hierarchical pseudo connections are proposed for
facilitating the identity-preserving learning by introducing more appearance
variance without identity changing. Extensive experiments show that our method
significantly outperforms prior art in both the visual quality and face
verification accuracy of restored results.
- Abstract(参考訳): 長距離撮影の多くの応用において、キャプチャー画像に現れる人が大気の乱流によってしばしば劣化するシナリオに直面している。
しかし,このような劣化画像の復元は,劣化によって幾何学的に歪んでぼやけてしまうため困難である。
乱流効果を緩和するため,本稿では,よく訓練されたganでカプセル化された視覚前駆体を用いた最初の乱流緩和法を提案する。
視覚前兆に基づいて,空間的周期的文脈距離で復元された画像の同一性を保つことを学ぶ。
このような距離は、ネットワーク学習における同一性の違いを考慮して、復元された画像のリアリズムをGANから保持することができる。
さらに,アイデンティティ変更を伴わずに外観のばらつきを増大させることにより,アイデンティティ保存学習を容易にするために,階層的な擬似接続を提案する。
広汎な実験により, 回復した結果の視覚的品質と顔認証精度において, 先行技術よりも有意に優れていた。
関連論文リスト
- Weakly Supervised Face and Whole Body Recognition in Turbulent
Environments [2.2263723609685773]
本稿では, 領域表現を生成し, 乱流像と原始像を共通部分空間に整列する, 弱教師付きフレームワークを提案する。
また、乱流画像で観測される幾何歪みを予測する新しい傾きマップ推定器も導入した。
提案手法では, 乱流のない画像や地対画像の合成は必要とせず, 注釈付きサンプルを著しく少なくする。
論文 参考訳(メタデータ) (2023-08-22T19:58:02Z) - All-in-one Multi-degradation Image Restoration Network via Hierarchical
Degradation Representation [47.00239809958627]
我々は新しいオールインワン・マルチデグレーション画像復元ネットワーク(AMIRNet)を提案する。
AMIRNetは、クラスタリングによって木構造を段階的に構築することで、未知の劣化画像の劣化表現を学習する。
この木構造表現は、様々な歪みの一貫性と不一致を明示的に反映しており、画像復元の具体的な手がかりとなっている。
論文 参考訳(メタデータ) (2023-08-06T04:51:41Z) - Learning to restore images degraded by atmospheric turbulence using
uncertainty [93.72048616001064]
大気の乱流は、長距離イメージングシステムによって取得された画像の品質を著しく低下させることができる。
本研究では,大気乱流により劣化した1つの画像の復元のための深層学習に基づくアプローチを提案する。
論文 参考訳(メタデータ) (2022-07-07T17:24:52Z) - Thermal to Visible Image Synthesis under Atmospheric Turbulence [67.99407460140263]
バイオメトリックスや監視では、低照度と夜間の条件下での撮像に熱画像モダリティがしばしば用いられる。
このような画像システムは、しばしば大気の乱れに悩まされ、撮像された画像に激しいぼやけや変形のアーチファクトをもたらす。
熱画像を直接可視光画像に変換するエンド・ツー・エンドの再構成法を提案する。
論文 参考訳(メタデータ) (2022-04-06T19:47:41Z) - Network Architecture Search for Face Enhancement [82.25775020564654]
我々は、NASFE(Network Architecture Search for Face Enhancement)と呼ばれるマルチタスクの顔復元ネットワークを提案する。
NASFEは、単一の劣化(すなわち)を含む低品質の顔画像を高めることができる。
ノイズまたはぼやけ)または複数の劣化(ノイズ+ブラル+ローライト)
論文 参考訳(メタデータ) (2021-05-13T19:46:05Z) - Learning to Restore a Single Face Image Degraded by Atmospheric
Turbulence using CNNs [93.72048616001064]
このような条件下で撮影された画像は、幾何学的変形と空間のぼかしの組合せに悩まされる。
乱流劣化顔画像の復元問題に対する深層学習に基づく解法を提案する。
論文 参考訳(メタデータ) (2020-07-16T15:25:08Z) - Exploiting Deep Generative Prior for Versatile Image Restoration and
Manipulation [181.08127307338654]
本研究は, 大規模自然画像に基づいて学習したGAN(Generative Adversarial Network)により, 得られた画像の有効利用方法を示す。
深層生成前駆体(DGP)は、色、パッチ、解像度、様々な劣化した画像の欠落したセマンティクスを復元するための説得力のある結果を提供する。
論文 参考訳(メタデータ) (2020-03-30T17:45:07Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。