論文の概要: Learning with Privileged Information for Efficient Image
Super-Resolution
- arxiv url: http://arxiv.org/abs/2007.07524v1
- Date: Wed, 15 Jul 2020 07:44:18 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-10 05:54:14.588836
- Title: Learning with Privileged Information for Efficient Image
Super-Resolution
- Title(参考訳): 効率的な画像超解像のための特権情報を用いた学習
- Authors: Wonkyung Lee, Junghyup Lee, Dohyung Kim, Bumsub Ham
- Abstract要約: 本稿では,FSRCNNの性能を大幅に向上させる,教員ネットワークと学生ネットワークからなる新しい蒸留フレームワークについて紹介する。
教師のエンコーダは、模倣損失を用いて劣化過程、HR画像のサブサンプリングを学習する。
FSRCNNと同じネットワークアーキテクチャを持つ教師の生徒とデコーダは、HR画像の再構築を試みる。
- 参考スコア(独自算出の注目度): 35.599731963795875
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Convolutional neural networks (CNNs) have allowed remarkable advances in
single image super-resolution (SISR) over the last decade. Most SR methods
based on CNNs have focused on achieving performance gains in terms of quality
metrics, such as PSNR and SSIM, over classical approaches. They typically
require a large amount of memory and computational units. FSRCNN, consisting of
few numbers of convolutional layers, has shown promising results, while using
an extremely small number of network parameters. We introduce in this paper a
novel distillation framework, consisting of teacher and student networks, that
allows to boost the performance of FSRCNN drastically. To this end, we propose
to use ground-truth high-resolution (HR) images as privileged information. The
encoder in the teacher learns the degradation process, subsampling of HR
images, using an imitation loss. The student and the decoder in the teacher,
having the same network architecture as FSRCNN, try to reconstruct HR images.
Intermediate features in the decoder, affordable for the student to learn, are
transferred to the student through feature distillation. Experimental results
on standard benchmarks demonstrate the effectiveness and the generalization
ability of our framework, which significantly boosts the performance of FSRCNN
as well as other SR methods. Our code and model are available online:
https://cvlab.yonsei.ac.kr/projects/PISR.
- Abstract(参考訳): 畳み込みニューラルネットワーク(cnns)は、過去10年間でシングルイメージ・スーパーレゾリューション(sisr)の著しい進歩をもたらした。
cnnに基づくほとんどのsrメソッドは、従来のアプローチよりも、psnrやssimといった品質指標によるパフォーマンス向上に重点を置いている。
それらは通常、大量のメモリと計算ユニットを必要とする。
FSRCNNは、少数の畳み込み層で構成されており、非常に少数のネットワークパラメータを使用しながら、有望な結果を示している。
本稿では,FSRCNNの性能を大幅に向上させる,教員ネットワークと学生ネットワークからなる新しい蒸留フレームワークについて紹介する。
そこで本研究では,高分解能画像(HR)を特権情報として用いることを提案する。
教師のエンコーダは、模倣損失を用いて、hr画像のサブサンプリングによる劣化過程を学習する。
FSRCNNと同じネットワークアーキテクチャを持つ教師の生徒とデコーダは、HR画像の再構築を試みる。
生徒が学べる手頃な価格のデコーダの中間機能は、特徴蒸留を通じて学生に移管される。
標準ベンチマークによる実験結果から,FSRCNNと他のSR手法の性能を大幅に向上させるフレームワークの有効性と一般化能力が示された。
私たちのコードとモデルはオンラインで利用可能です。
関連論文リスト
- Feature-domain Adaptive Contrastive Distillation for Efficient Single
Image Super-Resolution [3.2453621806729234]
CNNベースのSISRは、多くのパラメータと高い計算コストを持ち、より良い性能を実現している。
知識蒸留(KD)は教師の有用な知識を学生に伝達する。
本稿では,軽量なSISRネットワークを効率的に訓練するための特徴領域適応型コントラスト蒸留(FACD)手法を提案する。
論文 参考訳(メタデータ) (2022-11-29T06:24:14Z) - Pushing the Efficiency Limit Using Structured Sparse Convolutions [82.31130122200578]
本稿では,画像の固有構造を利用して畳み込みフィルタのパラメータを削減する構造的スパース畳み込み(SSC)を提案する。
我々は、SSCが効率的なアーキテクチャにおける一般的なレイヤ(奥行き、グループ回り、ポイント回りの畳み込み)の一般化であることを示す。
SSCに基づくアーキテクチャは、CIFAR-10、CIFAR-100、Tiny-ImageNet、ImageNet分類ベンチマークのベースラインと比較して、最先端のパフォーマンスを実現している。
論文 参考訳(メタデータ) (2022-10-23T18:37:22Z) - Image Super-resolution with An Enhanced Group Convolutional Neural
Network [102.2483249598621]
学習能力の強いCNNは、超解像問題を解くために広く選択されている。
浅層構造を持つ超解像群CNN(ESRGCNN)を提案する。
ESRGCNNは、SISRの性能、複雑さ、実行速度、画質評価およびSISRの視覚効果の観点から、最先端技術を上回っていると報告されている。
論文 参考訳(メタデータ) (2022-05-29T00:34:25Z) - Self-Denoising Neural Networks for Few Shot Learning [66.38505903102373]
既存のニューラルアーキテクチャの複数の段階でノイズを追加すると同時に、この付加ノイズに対して堅牢であるように学習する新しいトレーニングスキームを提案する。
このアーキテクチャは、SDNN(Self-Denoising Neural Network)と呼ばれ、現代の畳み込みニューラルネットワークに容易に適用できます。
論文 参考訳(メタデータ) (2021-10-26T03:28:36Z) - Over-and-Under Complete Convolutional RNN for MRI Reconstruction [57.95363471940937]
MR画像再構成のための最近のディープラーニングに基づく手法は、通常、汎用的なオートエンコーダアーキテクチャを利用する。
OUCR(Over-and-Under Complete Convolu?tional Recurrent Neural Network)を提案する。
提案手法は, トレーニング可能なパラメータの少ない圧縮されたセンシングと, 一般的なディープラーニングに基づく手法に対して, 大幅な改善を実現する。
論文 参考訳(メタデータ) (2021-06-16T15:56:34Z) - (ASNA) An Attention-based Siamese-Difference Neural Network with
Surrogate Ranking Loss function for Perceptual Image Quality Assessment [0.0]
画像復元と拡張のための逆訓練フレームワークを利用する深層畳み込みニューラルネットワーク(dcnn)は、処理された画像のシャープさを大幅に改善した。
イメージの知覚品質とよく一致したパフォーマンスを反映した定量的指標を開発する必要がある。
本稿では,従来のSiameseネットワークの拡張アーキテクチャを用いた畳み込みニューラルネットワークを提案する。
論文 参考訳(メタデータ) (2021-05-06T09:04:21Z) - Knowledge Distillation By Sparse Representation Matching [107.87219371697063]
本稿では,一方の畳み込みネットワーク(cnn)から他方へ,スパース表現を用いて中間知識を伝達するスパース表現マッチング(srm)を提案する。
勾配降下を利用して効率的に最適化し、任意のCNNにプラグアンドプレイで統合できるニューラルプロセッシングブロックとして定式化します。
実験の結果,教師と生徒のネットワーク間のアーキテクチャの違いに頑健であり,複数のデータセットにまたがる他のkd技術よりも優れていた。
論文 参考訳(メタデータ) (2021-03-31T11:47:47Z) - ClassSR: A General Framework to Accelerate Super-Resolution Networks by
Data Characteristic [35.02837100573671]
大型画像(2K-8K)上での超解像(SR)ネットワークの高速化を目指す。
異なる画像領域は復元の困難度が異なり、異なるキャパシティを持つネットワークで処理できることがわかった。
分類とSRを統一したフレームワークで組み合わせた新しいソリューションパイプラインであるClassSRを提案する。
論文 参考訳(メタデータ) (2021-03-06T06:00:31Z) - Cascade Convolutional Neural Network for Image Super-Resolution [15.650515790147189]
画像超解像のためのカスケード畳み込みニューラルネットワーク(CSRCNN)を提案する。
異なるスケールのイメージを同時にトレーニングすることができ、学習されたネットワークは、異なるスケールのイメージに存在する情報をフル活用することができる。
論文 参考訳(メタデータ) (2020-08-24T11:34:03Z) - Lightweight image super-resolution with enhanced CNN [82.36883027158308]
強い表現力を持つ深部畳み込みニューラルネットワーク(CNN)は、単一画像超解像(SISR)において印象的な性能を達成した
情報抽出・拡張ブロック(IEEB)、再構築ブロック(RB)、情報精製ブロック(IRB)の3つの連続したサブブロックを持つ軽量拡張SR CNN(LESRCNN)を提案する。
IEEBは階層的低分解能(LR)特徴を抽出し、SISRの深い層上の浅い層の記憶能力を高めるために、得られた特徴を段階的に集約する。
RBはグローバルに拡散することで低周波特徴を高周波特徴に変換する
論文 参考訳(メタデータ) (2020-07-08T18:03:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。