論文の概要: A Practical Contrastive Learning Framework for Single-Image
Super-Resolution
- arxiv url: http://arxiv.org/abs/2111.13924v2
- Date: Sun, 16 Jul 2023 16:00:40 GMT
- ステータス: 処理完了
- システム内更新日: 2023-07-19 00:56:12.679835
- Title: A Practical Contrastive Learning Framework for Single-Image
Super-Resolution
- Title(参考訳): シングルイメージ超解法のための実践的コントラスト学習フレームワーク
- Authors: Gang Wu and Junjun Jiang and Xianming Liu
- Abstract要約: コントラスト学習に基づく単一画像の超解像を2つの視点から検討する。
SISR のための実践的コントラスト学習フレームワーク PCL-SR を提案する。
既存のベンチマーク手法と比較して,提案手法をPCL-SRフレームワークで再学習し,優れた性能を実現する。
- 参考スコア(独自算出の注目度): 51.422185656787285
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Contrastive learning has achieved remarkable success on various high-level
tasks, but there are fewer contrastive learning-based methods proposed for
low-level tasks. It is challenging to adopt vanilla contrastive learning
technologies proposed for high-level visual tasks to low-level image
restoration problems straightly. Because the acquired high-level global visual
representations are insufficient for low-level tasks requiring rich texture and
context information. In this paper, we investigate the contrastive
learning-based single image super-resolution from two perspectives: positive
and negative sample construction and feature embedding. The existing methods
take naive sample construction approaches (e.g., considering the low-quality
input as a negative sample and the ground truth as a positive sample) and adopt
a prior model (e.g., pre-trained VGG model) to obtain the feature embedding. To
this end, we propose a practical contrastive learning framework for SISR, named
PCL-SR. We involve the generation of many informative positive and hard
negative samples in frequency space. Instead of utilizing an additional
pre-trained network, we design a simple but effective embedding network
inherited from the discriminator network which is more task-friendly. Compared
with existing benchmark methods, we re-train them by our proposed PCL-SR
framework and achieve superior performance. Extensive experiments have been
conducted to show the effectiveness and technical contributions of our proposed
PCL-SR thorough ablation studies. The code and pre-trained models can be found
at https://github.com/Aitical/PCL-SISR.
- Abstract(参考訳): コントラスト学習は様々な高レベルタスクにおいて顕著な成功を収めてきたが、低レベルタスクに対して提案されたコントラスト学習ベースの手法は少ない。
低レベル画像復元問題に対して高レベル視覚課題に対して提案されるバニラコントラスト学習技術を採用することは困難である。
取得した高レベルなグローバルな視覚表現は、リッチなテクスチャとコンテキスト情報を必要とする低レベルなタスクには不十分である。
本稿では,正と負のサンプル構成と特徴埋め込みという2つの視点から,コントラスト学習に基づく単一画像の超解像について検討する。
既存の手法では、単純なサンプル構築アプローチ(例えば、低品質入力を負のサンプルとして、基底真理を正のサンプルとして)を採用し、事前モデル(例えば、事前訓練されたVGGモデル)を採用して特徴埋め込みを得る。
そこで本稿では,PCL-SR という SISR の実践的コントラスト学習フレームワークを提案する。
周波数空間に多数の有意な正と硬い負のサンプルを生成する。
事前訓練されたネットワークを利用する代わりに、よりタスクフレンドリーな識別器ネットワークから受け継いだ、シンプルで効果的な埋め込みネットワークを設計する。
既存のベンチマーク手法と比較して,提案手法をPCL-SRフレームワークで再学習し,優れた性能を実現する。
提案したPCL-SR完全アブレーション研究の有効性と技術的貢献を明らかにするため,広範囲な実験を行った。
コードと事前訓練されたモデルはhttps://github.com/Aitical/PCL-SISRで見ることができる。
関連論文リスト
- InfRS: Incremental Few-Shot Object Detection in Remote Sensing Images [11.916941756499435]
本稿では,リモートセンシング画像におけるインクリメンタルな数ショット物体検出の複雑な課題について検討する。
本稿では,新しい授業の漸進的な学習を促進するために,InfRSと呼ばれる先駆的な微調整技術を導入する。
我々はワッサーシュタイン距離に基づく原型校正戦略を開発し、破滅的な忘れ問題を軽減する。
論文 参考訳(メタデータ) (2024-05-18T13:39:50Z) - Enhancing Vision-Language Few-Shot Adaptation with Negative Learning [11.545127156146368]
我々は,タスク固有の知識をより効率的に活用するための,シンプルで効果的な否定的学習手法SimNLを提案する。
そこで本研究では,雑音を緩和するために,プラグアンドプレイによる数発のインスタンス再重み付け手法を提案する。
提案したSimNLは,少数ショット学習とドメイン一般化の両タスクにおいて,既存の最先端手法よりも優れていることを確認した。
論文 参考訳(メタデータ) (2024-03-19T17:59:39Z) - A Lightweight Parallel Framework for Blind Image Quality Assessment [7.9562077122537875]
ブラインド画像品質評価(BIQA)のための軽量並列フレームワーク(LPF)を提案する。
まず,事前学習した特徴抽出ネットワークを用いて視覚特徴を抽出し,視覚特徴を変換するための簡易で効果的な特徴埋め込みネットワーク(FEN)を構築した。
本稿では,サンプルレベルのカテゴリ予測タスクとバッチレベルの品質比較タスクを含む,新たな2つのサブタスクを提案する。
論文 参考訳(メタデータ) (2024-02-19T10:56:58Z) - Learning Deep Representations via Contrastive Learning for Instance
Retrieval [11.736450745549792]
本稿では、インスタンス識別に基づくコントラスト学習(CL)を用いて、この問題に取り組むための最初の試みを行う。
本研究では、事前学習されたCLモデルと微調整されたCLモデルから識別表現を導出する能力を探求することにより、この問題に対処する。
論文 参考訳(メタデータ) (2022-09-28T04:36:34Z) - What Makes Good Contrastive Learning on Small-Scale Wearable-based
Tasks? [59.51457877578138]
本研究では,ウェアラブル型行動認識タスクにおけるコントラスト学習について検討する。
本稿では,PyTorchライブラリのtextttCL-HAR について述べる。
論文 参考訳(メタデータ) (2022-02-12T06:10:15Z) - On Efficient Transformer and Image Pre-training for Low-level Vision [74.22436001426517]
プレトレーニングは、ハイレベルコンピュータビジョンにおける多くの最先端の芸術である。
画像事前学習の詳細な研究について述べる。
低レベルのタスクでは,事前トレーニングが極めて異なる役割を担っています。
論文 参考訳(メタデータ) (2021-12-19T15:50:48Z) - Activation to Saliency: Forming High-Quality Labels for Unsupervised
Salient Object Detection [54.92703325989853]
本稿では,高品質なサリエンシキューを効果的に生成する2段階アクティベーション・ツー・サリエンシ(A2S)フレームワークを提案する。
トレーニングプロセス全体において、私たちのフレームワークにヒューマンアノテーションは関与していません。
本フレームワークは,既存のUSOD法と比較して高い性能を示した。
論文 参考訳(メタデータ) (2021-12-07T11:54:06Z) - Weakly Supervised Contrastive Learning [68.47096022526927]
この問題に対処するために,弱教師付きコントラスト学習フレームワーク(WCL)を導入する。
WCLはResNet50を使用して65%と72%のImageNet Top-1の精度を実現している。
論文 参考訳(メタデータ) (2021-10-10T12:03:52Z) - Low-Resolution Face Recognition In Resource-Constrained Environments [34.13093606945265]
本研究では,非パラメトリック低解像度顔認識モデルを提案する。
少数のラベル付きデータサンプルで、トレーニングの複雑さが低く、低解像度の入力イメージでトレーニングすることができる。
提案モデルの有効性は,LFWとCMU Multi-PIEデータセットの実験によって実証された。
論文 参考訳(メタデータ) (2020-11-23T19:14:02Z) - Prototypical Contrastive Learning of Unsupervised Representations [171.3046900127166]
原型コントラスト学習(Prototypeal Contrastive Learning, PCL)は、教師なし表現学習法である。
PCLは暗黙的にデータのセマンティック構造を学習された埋め込み空間にエンコードする。
PCLは、複数のベンチマークで最先端のインスタンスワイド・コントラスト学習法より優れている。
論文 参考訳(メタデータ) (2020-05-11T09:53:36Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。