論文の概要: Dual Adversarial Adaptation for Cross-Device Real-World Image
Super-Resolution
- arxiv url: http://arxiv.org/abs/2205.03524v1
- Date: Sat, 7 May 2022 02:55:39 GMT
- ステータス: 処理完了
- システム内更新日: 2022-05-15 12:15:44.359266
- Title: Dual Adversarial Adaptation for Cross-Device Real-World Image
Super-Resolution
- Title(参考訳): クロスデバイス実世界の超解像に対する双対適応法
- Authors: Xiaoqian Xu, Pengxu Wei, Weikai Chen, Mingzhi Mao, Liang Lin, Guanbin
Li
- Abstract要約: 異なるデバイスからの画像に基づいて訓練された超高解像度(SR)モデルは、異なる画像パターンを示す可能性がある。
本稿では、DADA(Dual Adversarial Adaptation)という、実世界のSRのための教師なしドメイン適応機構を提案する。
3台のカメラで6台のリアル・トゥ・リアル・アダプティブ・セッティングで実験を行い、既存の最先端のアプローチと比較して優れた性能を実現した。
- 参考スコア(独自算出の注目度): 114.26933742226115
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Due to the sophisticated imaging process, an identical scene captured by
different cameras could exhibit distinct imaging patterns, introducing distinct
proficiency among the super-resolution (SR) models trained on images from
different devices. In this paper, we investigate a novel and practical task
coded cross-device SR, which strives to adapt a real-world SR model trained on
the paired images captured by one camera to low-resolution (LR) images captured
by arbitrary target devices. The proposed task is highly challenging due to the
absence of paired data from various imaging devices. To address this issue, we
propose an unsupervised domain adaptation mechanism for real-world SR, named
Dual ADversarial Adaptation (DADA), which only requires LR images in the target
domain with available real paired data from a source camera. DADA employs the
Domain-Invariant Attention (DIA) module to establish the basis of target model
training even without HR supervision. Furthermore, the dual framework of DADA
facilitates an Inter-domain Adversarial Adaptation (InterAA) in one branch for
two LR input images from two domains, and an Intra-domain Adversarial
Adaptation (IntraAA) in two branches for an LR input image. InterAA and IntraAA
together improve the model transferability from the source domain to the
target. We empirically conduct experiments under six Real to Real adaptation
settings among three different cameras, and achieve superior performance
compared with existing state-of-the-art approaches. We also evaluate the
proposed DADA to address the adaptation to the video camera, which presents a
promising research topic to promote the wide applications of real-world
super-resolution. Our source code is publicly available at
https://github.com/lonelyhope/DADA.git.
- Abstract(参考訳): 高度な撮像プロセスのため、異なるカメラが捉えた同一のシーンは異なる画像パターンを示し、異なるデバイスからの画像に基づいて訓練された超高解像度(SR)モデルに異なる習熟性をもたらす可能性がある。
本稿では,一台のカメラで撮影したペア画像に基づいて訓練された実世界のSRモデルを,任意のターゲットデバイスで撮影した低解像度(LR)画像に適応させる,新規で実用的なクロスデバイスSRについて検討する。
提案課題は,様々な撮像装置からのペアデータがないため,極めて困難である。
この問題に対処するために,DADA (Dual ADversarial Adaptation) と呼ばれる実世界SRのための教師なしドメイン適応機構を提案する。
DADAは、HR監督なしでもターゲットモデルトレーニングの基礎を確立するために、Domain-Invariant Attention (DIA)モジュールを使用している。
さらに、DADAの2つのフレームワークは、2つのドメインからのLR入力画像に対して1つのブランチのドメイン間適応(InterAA)、そして2つのブランチのLR入力画像に対するドメイン内適応(IntraAA)を促進する。
InterAAとIntraAAは共に、ソースドメインからターゲットへのモデル転送性を改善する。
3つの異なるカメラで6つのリアルからリアルの順応設定で実験を行い、既存の最先端のアプローチと比較して優れた性能を得る。
また,ビデオカメラへの適応に対処するために提案したDADを評価し,現実の超解像の幅広い応用を促進するための有望な研究課題を提示する。
ソースコードはhttps://github.com/lonelyhope/dada.gitで公開しています。
関連論文リスト
- Self-Supervised Learning for Real-World Super-Resolution from Dual and Multiple Zoomed Observations [61.448005005426666]
スマートフォン用レファレンスベーススーパーレゾリューション(RefSR)における2つの課題について考察する。
本稿では,デュアルカメラとマルチカメラのズームで観測した実世界のRefSRに対して,新たな自己教師型学習手法を提案する。
論文 参考訳(メタデータ) (2024-05-03T15:20:30Z) - TransY-Net:Learning Fully Transformer Networks for Change Detection of
Remote Sensing Images [64.63004710817239]
リモートセンシング画像CDのためのトランスフォーマーベース学習フレームワークTransY-Netを提案する。
グローバルな視点からの特徴抽出を改善し、ピラミッド方式で多段階の視覚的特徴を組み合わせる。
提案手法は,4つの光学式および2つのSAR画像CDベンチマーク上での最先端性能を実現する。
論文 参考訳(メタデータ) (2023-10-22T07:42:19Z) - Detect, Augment, Compose, and Adapt: Four Steps for Unsupervised Domain
Adaptation in Object Detection [7.064953237013352]
教師なし領域適応(Unsupervised domain adapt、UDA)は、アノテートされたデータなしで、ソース学習された検出器を対象領域に適応させる際に、オブジェクト検出において重要な役割を果たす。
自己超越性を活用し,ソースとターゲットデータを同時に訓練する,新しい,効果的な4段階のUDA手法を提案する。
提案手法は最先端性能を実現し,平均精度(mAP)を2%以上向上させる。
論文 参考訳(メタデータ) (2023-08-29T14:48:29Z) - Real-World Image Super Resolution via Unsupervised Bi-directional Cycle
Domain Transfer Learning based Generative Adversarial Network [14.898170534545727]
UBCDTLGAN(Unsupervised Bi-directional Cycle Domain Transfer Learning-based Generative Adrial Network)を提案する。
まず、UBCDTNは、人工劣化領域から実世界の画像領域にLR画像を転送することで、近似された実状LR画像を生成することができる。
第二に、SESRNは、近似されたリアルライクなLR画像をフォトリアリスティックなHR画像に超解ける能力を持っている。
論文 参考訳(メタデータ) (2022-11-19T02:19:21Z) - Self-Supervised Learning for Real-World Super-Resolution from Dual
Zoomed Observations [66.09210030518686]
デュアルカメラズーム(SelfDZSR)で観測した実世界のRefSRに対する新しい自己教師型学習手法を提案する。
最初の問題として、よりズームされた(望遠的な)画像は、より少ないズームされた(短焦点)画像のSRをガイドする参照として自然に利用することができる。
2つ目の問題として、セルフDZSRは、短焦点画像のSR結果を得るための深層ネットワークを、望遠画像と同じ解像度で学習する。
論文 参考訳(メタデータ) (2022-03-02T13:30:56Z) - Dual-Camera Super-Resolution with Aligned Attention Modules [56.54073689003269]
デュアルカメラ・スーパーレゾリューション(DCSR)に着目したレファレンスベース・スーパーレゾリューション(RefSR)への新しいアプローチを提案する。
提案手法は,空間アライメント操作と標準パッチベースの特徴マッチングを一般化する。
実世界の画像とトレーニング画像の領域ギャップを埋めるために,自己監督型領域適応戦略を提案する。
論文 参考訳(メタデータ) (2021-09-03T07:17:31Z) - Super-Resolving Cross-Domain Face Miniatures by Peeking at One-Shot
Exemplar [42.78574493628936]
DAP-FSRネットワークというドメイン対応ピラミッド型顔超解像ネットワークを開発した。
DAP-FSRは、ターゲットドメイン内の一対の高分解能(HR)とLRの例のみを利用して、ターゲットドメインからLR面を超解決する最初の試みです。
遅延表現とデコーダを反復的に更新することで、DAP-FSRはターゲットドメインに適応する。
論文 参考訳(メタデータ) (2021-03-16T05:47:26Z) - DDet: Dual-path Dynamic Enhancement Network for Real-World Image
Super-Resolution [69.2432352477966]
実画像超解像(Real-SR)は、実世界の高分解能画像(HR)と低分解能画像(LR)の関係に焦点を当てている。
本稿では,Real-SRのためのデュアルパス動的拡張ネットワーク(DDet)を提案する。
特徴表現のための大規模な畳み込みブロックを積み重ねる従来の手法とは異なり、非一貫性のある画像対を研究するためのコンテンツ認識フレームワークを導入する。
論文 参考訳(メタデータ) (2020-02-25T18:24:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。