論文の概要: HighRes-net: Recursive Fusion for Multi-Frame Super-Resolution of
Satellite Imagery
- arxiv url: http://arxiv.org/abs/2002.06460v1
- Date: Sat, 15 Feb 2020 22:17:47 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-31 22:44:04.136479
- Title: HighRes-net: Recursive Fusion for Multi-Frame Super-Resolution of
Satellite Imagery
- Title(参考訳): HighRes-net: 衛星画像のマルチフレーム超解像のための再帰核融合
- Authors: Michel Deudon, Alfredo Kalaitzis, Israel Goytom, Md Rifat Arefin,
Zhichao Lin, Kris Sankaran, Vincent Michalski, Samira E. Kahou, Julien
Cornebise, Yoshua Bengio
- Abstract要約: MFSR(Multi-frame Super-Resolution)は、問題に対するより根底的なアプローチを提供する。
これは、地球上の人間の影響を衛星で観測する上で重要である。
我々は,MFSRにおける最初のディープラーニングアプローチであるHighRes-netを紹介し,そのサブタスクをエンドツーエンドで学習する。
- 参考スコア(独自算出の注目度): 55.253395881190436
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Generative deep learning has sparked a new wave of Super-Resolution (SR)
algorithms that enhance single images with impressive aesthetic results, albeit
with imaginary details. Multi-frame Super-Resolution (MFSR) offers a more
grounded approach to the ill-posed problem, by conditioning on multiple
low-resolution views. This is important for satellite monitoring of human
impact on the planet -- from deforestation, to human rights violations -- that
depend on reliable imagery. To this end, we present HighRes-net, the first deep
learning approach to MFSR that learns its sub-tasks in an end-to-end fashion:
(i) co-registration, (ii) fusion, (iii) up-sampling, and (iv)
registration-at-the-loss. Co-registration of low-resolution views is learned
implicitly through a reference-frame channel, with no explicit registration
mechanism. We learn a global fusion operator that is applied recursively on an
arbitrary number of low-resolution pairs. We introduce a registered loss, by
learning to align the SR output to a ground-truth through ShiftNet. We show
that by learning deep representations of multiple views, we can super-resolve
low-resolution signals and enhance Earth Observation data at scale. Our
approach recently topped the European Space Agency's MFSR competition on
real-world satellite imagery.
- Abstract(参考訳): 生成的深層学習は、画像に印象的な美的結果を与える超解法(SR)アルゴリズムの新たな波を引き起こした。
MFSR(Multi-frame Super-Resolution)は、複数の低解像度ビューを条件付けすることで、不適切な問題に対するより基礎的なアプローチを提供する。
これは、信頼できる画像に依存する森林破壊から人権侵害まで、地球への人的影響を衛星で監視する上で重要である。
この目的のために、我々はMFSRに対する最初のディープラーニングアプローチであるHighRes-netを紹介し、そのサブタスクをエンドツーエンドで学習する。
(i)共同登録
(ii)融合。
(iii)アップサンプリング、及び
(iv)失効時の登録。
低解像度ビューの共登録は、明示的な登録機構を持たない参照フレームチャネルを通じて暗黙的に学習される。
任意の数の低解像度ペアに対して再帰的に適用される大域的融合演算子を学習する。
我々は、ShiftNetを通じてSR出力を接地木に整列させることで、登録損失を導入する。
複数のビューの深い表現を学習することで、低解像度の信号を超解き、地球観測データを大規模に拡張できることを示す。
我々は最近、欧州宇宙機関(esa)の衛星画像に関するmfsrコンペティションを勝ち取った。
関連論文リスト
- ESC-MISR: Enhancing Spatial Correlations for Multi-Image Super-Resolution in Remote Sensing [9.782167510476599]
リモートセンシングにおけるマルチイメージ超解像(MISR-RS)は,リモートセンシングコミュニティにおいて重要な研究課題である。
HR画像再構成のための複数の画像の空間的時間的関係を完全に活用した,ESC-MISR(Enhancing spatial correlations in MISR)という新しいフレームワークを提案する。
提案手法は, ProBA-V データセットの2バンドでそれぞれ 0.70dB と 0.76dB cPSNR の改善を実現している。
論文 参考訳(メタデータ) (2024-11-07T13:45:04Z) - Self-Supervised Learning for Real-World Super-Resolution from Dual and Multiple Zoomed Observations [61.448005005426666]
スマートフォン用レファレンスベーススーパーレゾリューション(RefSR)における2つの課題について考察する。
本稿では,デュアルカメラとマルチカメラのズームで観測した実世界のRefSRに対して,新たな自己教師型学習手法を提案する。
論文 参考訳(メタデータ) (2024-05-03T15:20:30Z) - RBSR: Efficient and Flexible Recurrent Network for Burst
Super-Resolution [57.98314517861539]
バースト超解像(BurstSR)は、高解像度(HR)画像を低解像度(LR)画像と雑音画像から再構成することを目的としている。
本稿では,効率よくフレキシブルなリカレントネットワークでフレーム単位のキューを融合させることを提案する。
論文 参考訳(メタデータ) (2023-06-30T12:14:13Z) - Better "CMOS" Produces Clearer Images: Learning Space-Variant Blur
Estimation for Blind Image Super-Resolution [30.816546273417774]
我々は、空のぼかしを持つ2つの新しいデータセット、すなわちNYUv2-BSRとCityscapes-BSRを導入する。
データセットに基づいて,ブラーとセマンティクスを同時に推定するクロスモーダルファシオンネットワーク(CMOS)を設計する。
論文 参考訳(メタデータ) (2023-04-07T08:40:31Z) - Real-World Image Super Resolution via Unsupervised Bi-directional Cycle
Domain Transfer Learning based Generative Adversarial Network [14.898170534545727]
UBCDTLGAN(Unsupervised Bi-directional Cycle Domain Transfer Learning-based Generative Adrial Network)を提案する。
まず、UBCDTNは、人工劣化領域から実世界の画像領域にLR画像を転送することで、近似された実状LR画像を生成することができる。
第二に、SESRNは、近似されたリアルライクなLR画像をフォトリアリスティックなHR画像に超解ける能力を持っている。
論文 参考訳(メタデータ) (2022-11-19T02:19:21Z) - Hierarchical Similarity Learning for Aliasing Suppression Image
Super-Resolution [64.15915577164894]
エイリアスの影響を抑制するために階層画像超解像ネットワーク(HSRNet)を提案する。
HSRNetは、他の作品よりも定量的かつ視覚的なパフォーマンスを向上し、エイリアスをより効果的に再送信する。
論文 参考訳(メタデータ) (2022-06-07T14:55:32Z) - Real-World Image Super-Resolution by Exclusionary Dual-Learning [98.36096041099906]
実世界の画像超解像は,高品質な画像を得るための実用的な画像復元問題である。
深層学習に基づく手法は、現実世界の超解像データセットの復元に期待できる品質を実現している。
本稿では,RWSR-EDL(Real-World Image Super-Resolution by Exclusionary Dual-Learning)を提案する。
論文 参考訳(メタデータ) (2022-06-06T13:28:15Z) - Deep Burst Super-Resolution [165.90445859851448]
バースト超解像タスクのための新しいアーキテクチャを提案する。
我々のネットワークは複数のノイズRAW画像を入力として取り出し、出力として分解された超解像RGB画像を生成する。
実世界のデータのトレーニングと評価を可能にするため,BurstSRデータセットも導入する。
論文 参考訳(メタデータ) (2021-01-26T18:57:21Z) - Deep Cyclic Generative Adversarial Residual Convolutional Networks for
Real Image Super-Resolution [20.537597542144916]
我々は、LRとHRデータ分布間の領域整合性を維持するために、深い循環ネットワーク構造を考える。
本稿では,LRからHRドメインへの変換のためのGAN(Generative Adversarial Network)フレームワークを用いた学習により,超解像残留周期生成逆ネットワーク(SRResCycGAN)を提案する。
論文 参考訳(メタデータ) (2020-09-07T11:11:18Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。