論文の概要: Downscaled Representation Matters: Improving Image Rescaling with
Collaborative Downscaled Images
- arxiv url: http://arxiv.org/abs/2211.10643v1
- Date: Sat, 19 Nov 2022 10:13:00 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-22 20:08:21.002801
- Title: Downscaled Representation Matters: Improving Image Rescaling with
Collaborative Downscaled Images
- Title(参考訳): 縮小表現事項:協調的縮小画像による画像再スケーリングの改善
- Authors: Bingna Xu, Yong Guo, Luoqian Jiang, Mianjie Yu, Jian Chen
- Abstract要約: 本稿では,階層型協調型ダウンスケーリング(HCD)手法を提案する。
実験の結果,HCDは定量的かつ定性的に再現性能を著しく向上させることがわかった。
- 参考スコア(独自算出の注目度): 12.481875435822122
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Deep networks have achieved great success in image rescaling (IR) task that
seeks to learn the optimal downscaled representations, i.e., low-resolution
(LR) images, to reconstruct the original high-resolution (HR) images. Compared
with super-resolution methods that consider a fixed downscaling scheme, e.g.,
bicubic, IR often achieves significantly better reconstruction performance
thanks to the learned downscaled representations. This highlights the
importance of a good downscaled representation in image reconstruction tasks.
Existing IR methods mainly learn the downscaled representation by jointly
optimizing the downscaling and upscaling models. Unlike them, we seek to
improve the downscaled representation through a different and more direct way:
optimizing the downscaled image itself instead of the down-/upscaling models.
Specifically, we propose a collaborative downscaling scheme that directly
generates the collaborative LR examples by descending the gradient w.r.t. the
reconstruction loss on them to benefit the IR process. Furthermore, since LR
images are downscaled from the corresponding HR images, one can also improve
the downscaled representation if we have a better representation in the HR
domain. Inspired by this, we propose a Hierarchical Collaborative Downscaling
(HCD) method that performs gradient descent in both HR and LR domains to
improve the downscaled representations. Extensive experiments show that our HCD
significantly improves the reconstruction performance both quantitatively and
qualitatively. Moreover, we also highlight the flexibility of our HCD since it
can generalize well across diverse IR models.
- Abstract(参考訳): ディープネットワークは、解像度の低い(LR)イメージを学習し、元の高解像度(HR)イメージを再構築する、画像再スケーリング(IR)タスクにおいて大きな成功を収めている。
固定的なダウンスケーリング方式(例えばバイコビック、IR)を考える超解像法と比較すると、学習されたダウンスケール表現のおかげで、再現性能は大幅に向上する。
これは、画像再構成タスクにおける優れたダウンスケール表現の重要性を強調している。
既存のIR法は主にダウンスケールモデルとアップスケールモデルを協調的に最適化することでダウンスケール表現を学習する。
それらとは異なり、私たちは、異なる、より直接的な方法で、ダウンスケールの表現を改善することを目指している:ダウンスケールのイメージ自体を、ダウン/アップスケールのモデルではなく最適化する。
具体的には、IRプロセスの恩恵を受けるために、リコンストラクション損失の勾配を下げることにより、協調LRサンプルを直接生成する協調的なダウンスケーリング方式を提案する。
さらに、対応するHR画像からLR画像がダウンスケールされるので、HR領域により良い表現があれば、ダウンスケールされた表現を改善することもできる。
そこで本研究では,hrドメインとlrドメインの両方で勾配降下を行う階層型協調型ダウンスケーリング(hcd)手法を提案する。
広範囲にわたる実験により, hcdは定量的および質的に復元性能を著しく向上させた。
さらに、多様なIRモデルにまたがる一般化が可能であるため、HCDの柔軟性も強調する。
関連論文リスト
- Self-Asymmetric Invertible Network for Compression-Aware Image Rescaling [6.861753163565238]
現実世界のアプリケーションでは、ほとんどの画像は伝送のために圧縮される。
圧縮対応画像再スケーリングのための自己非対称可逆ネットワーク(SAIN)を提案する。
論文 参考訳(メタデータ) (2023-03-04T08:33:46Z) - DCS-RISR: Dynamic Channel Splitting for Efficient Real-world Image
Super-Resolution [15.694407977871341]
実世界の画像超解像(RISR)は、未知の複雑な劣化下でのSR画像の品質向上に重点を置いている。
既存の手法は、分解レベルが異なる低解像度(LR)画像を強化するために重いSRモデルに依存している。
本稿では,DCS-RISRと呼ばれる高効率リアルタイム画像超解法のための動的チャネル分割方式を提案する。
論文 参考訳(メタデータ) (2022-12-15T04:34:57Z) - Effective Invertible Arbitrary Image Rescaling [77.46732646918936]
Invertible Neural Networks (INN)は、ダウンスケーリングとアップスケーリングのサイクルを共同で最適化することにより、アップスケーリングの精度を大幅に向上させることができる。
本研究の1つのモデルのみをトレーニングすることにより、任意の画像再スケーリングを実現するために、単純で効果的な非可逆的再スケーリングネットワーク(IARN)を提案する。
LR出力の知覚品質を損なうことなく、双方向任意再スケーリングにおいて最先端(SOTA)性能を実現する。
論文 参考訳(メタデータ) (2022-09-26T22:22:30Z) - Towards Lightweight Super-Resolution with Dual Regression Learning [58.98801753555746]
深層ニューラルネットワークは、画像超解像(SR)タスクにおいて顕著な性能を示した。
SR問題は通常不適切な問題であり、既存の手法にはいくつかの制限がある。
本稿では、SRマッピングの可能な空間を削減するために、二重回帰学習方式を提案する。
論文 参考訳(メタデータ) (2022-07-16T12:46:10Z) - Hierarchical Similarity Learning for Aliasing Suppression Image
Super-Resolution [64.15915577164894]
エイリアスの影響を抑制するために階層画像超解像ネットワーク(HSRNet)を提案する。
HSRNetは、他の作品よりも定量的かつ視覚的なパフォーマンスを向上し、エイリアスをより効果的に再送信する。
論文 参考訳(メタデータ) (2022-06-07T14:55:32Z) - Scale-arbitrary Invertible Image Downscaling [17.67415618760949]
本稿では,任意のスケールファクタを持つHR画像のダウンスケールを実現するために,AIDN(Scale-Arbitrary Invertible Image Downscaling Network)を提案する。
我々のAIDNは、任意の整数と非整数のスケールファクタの両方で、可逆的なダウンスケーリングの最高性能を達成する。
論文 参考訳(メタデータ) (2022-01-29T12:27:52Z) - Hierarchical Conditional Flow: A Unified Framework for Image
Super-Resolution and Image Rescaling [139.25215100378284]
画像SRと画像再スケーリングのための統合フレームワークとして階層的条件フロー(HCFlow)を提案する。
HCFlowは、LR画像と残りの高周波成分の分布を同時にモデル化することにより、HRとLR画像ペア間のマッピングを学習する。
さらに性能を高めるために、知覚的損失やGAN損失などの他の損失と、トレーニングで一般的に使用される負の対数類似損失とを組み合わせる。
論文 参考訳(メタデータ) (2021-08-11T16:11:01Z) - Structure-Preserving Super Resolution with Gradient Guidance [87.79271975960764]
単一画像超解像(SISR)の構造
最近のGAN(Generative Adversarial Network)による研究は、SISRの開発を促進している。
しかし、復元された画像には常に望ましくない構造歪みがある。
論文 参考訳(メタデータ) (2020-03-29T17:26:58Z) - DDet: Dual-path Dynamic Enhancement Network for Real-World Image
Super-Resolution [69.2432352477966]
実画像超解像(Real-SR)は、実世界の高分解能画像(HR)と低分解能画像(LR)の関係に焦点を当てている。
本稿では,Real-SRのためのデュアルパス動的拡張ネットワーク(DDet)を提案する。
特徴表現のための大規模な畳み込みブロックを積み重ねる従来の手法とは異なり、非一貫性のある画像対を研究するためのコンテンツ認識フレームワークを導入する。
論文 参考訳(メタデータ) (2020-02-25T18:24:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。