論文の概要: SAR-to-EO Image Translation with Multi-Conditional Adversarial Networks
- arxiv url: http://arxiv.org/abs/2207.13184v1
- Date: Tue, 26 Jul 2022 21:19:34 GMT
- ステータス: 処理完了
- システム内更新日: 2022-07-28 13:53:13.194712
- Title: SAR-to-EO Image Translation with Multi-Conditional Adversarial Networks
- Title(参考訳): 多条件逆ネットワークを用いたsar-to-eo画像翻訳
- Authors: Armando Cabrera, Miriam Cha, Prafull Sharma, Michael Newey
- Abstract要約: GoogleマップやIRのような複数の補完的なモダリティを組み込むことで、SAR-to-EO画像の変換をさらに改善できることを示す。
提案手法は,SAR-to-EO画像変換性能向上のために,複数のモダリティを利用する最初の手法である。
- 参考スコア(独自算出の注目度): 4.576080539427072
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: This paper explores the use of multi-conditional adversarial networks for
SAR-to-EO image translation. Previous methods condition adversarial networks
only on the input SAR. We show that incorporating multiple complementary
modalities such as Google maps and IR can further improve SAR-to-EO image
translation especially on preserving sharp edges of manmade objects. We
demonstrate effectiveness of our approach on a diverse set of datasets
including SEN12MS, DFC2020, and SpaceNet6. Our experimental results suggest
that additional information provided by complementary modalities improves the
performance of SAR-to-EO image translation compared to the models trained on
paired SAR and EO data only. To best of our knowledge, our approach is the
first to leverage multiple modalities for improving SAR-to-EO image translation
performance.
- Abstract(参考訳): 本稿では,SAR-to-EO画像翻訳におけるマルチ条件対応ネットワークの利用について検討する。
従来は入力SARのみに条件付き敵ネットワークが存在した。
本稿では,GoogleマップやIRなどの複数の相補的なモダリティを組み込むことにより,SAR-to-EO画像の変換をさらに向上させることができることを示す。
我々は,SEN12MS,DFC2020,SpaceNet6などの多様なデータセットに対して,アプローチの有効性を示す。
実験結果から,相補的なモダリティによって提供される付加情報により,SAR-EO画像変換の性能が向上することが示唆された。
我々の知る限り、SAR-to-EO画像翻訳性能を改善するために、まず複数のモダリティを活用する。
関連論文リスト
- Rotated Multi-Scale Interaction Network for Referring Remote Sensing Image Segmentation [63.15257949821558]
Referring Remote Sensing Image (RRSIS)は、コンピュータビジョンと自然言語処理を組み合わせた新しい課題である。
従来の参照画像(RIS)アプローチは、空中画像に見られる複雑な空間スケールと向きによって妨げられている。
本稿ではRMSIN(Rotated Multi-Scale Interaction Network)を紹介する。
論文 参考訳(メタデータ) (2023-12-19T08:14:14Z) - OT-Attack: Enhancing Adversarial Transferability of Vision-Language
Models via Optimal Transport Optimization [65.57380193070574]
視覚言語事前学習モデルは、マルチモーダル対逆例に対して脆弱である。
近年の研究では、データ拡張と画像-テキストのモーダル相互作用を活用することで、対向的な例の転送可能性を高めることが示されている。
本稿では,OT-Attack と呼ばれる最適輸送方式の敵攻撃を提案する。
論文 参考訳(メタデータ) (2023-12-07T16:16:50Z) - SAR2EO: A High-resolution Image Translation Framework with Denoising
Enhancement [10.11898520476921]
本稿では,低解像度画像から高解像度画像への変換を実現するためのフレームワークであるSAR2EOを提案する。
まず、高品質なEO画像を生成するために、粗大な発電機、マルチスケールの判別器、およびピクセル2pixHDモデルにおける対向損失を改善する。
次に,SAR画像のノイズを除去するデノナイジングモジュールを導入し,画像の構造情報を保存しながらノイズを抑制する。
論文 参考訳(メタデータ) (2023-04-08T03:39:51Z) - A Dual-fusion Semantic Segmentation Framework With GAN For SAR Images [10.147351262526282]
合成開口レーダ(SAR)画像セグメンテーションを実現するために,広く使用されているエンコーダデコーダアーキテクチャに基づくネットワークを提案する。
光画像のより優れた表現能力により、多数のSARおよび光画像によって訓練された生成反転ネットワーク(GAN)を介して生成された光画像とSAR画像を統合することを提案する。
論文 参考訳(メタデータ) (2022-06-02T15:22:29Z) - Unsupervised Image-to-Image Translation with Generative Prior [103.54337984566877]
教師なし画像画像変換は、ペアデータなしで2つの視覚領域間の翻訳を学習することを目的としている。
本稿では,GP-UNIT(Generative Prior-guided UN Image-to-image Translation)という新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2022-04-07T17:59:23Z) - Transformer-based SAR Image Despeckling [53.99620005035804]
本稿では,SAR画像復号化のためのトランスフォーマーネットワークを提案する。
提案する非特定ネットワークは、トランスフォーマーベースのエンコーダにより、異なる画像領域間のグローバルな依存関係を学習することができる。
実験により,提案手法は従来型および畳み込み型ニューラルネットワークに基づく解法よりも大幅に改善されていることが示された。
論文 参考訳(メタデータ) (2022-01-23T20:09:01Z) - Enhancing Photorealism Enhancement [83.88433283714461]
本稿では,畳み込みネットワークを用いた合成画像のリアリズム向上手法を提案する。
一般的に使用されるデータセットのシーンレイアウトの分布を分析し、重要な方法で異なることを見つけます。
近年のイメージ・ツー・イメージ翻訳法と比較して,安定性とリアリズムの大幅な向上が報告されている。
論文 参考訳(メタデータ) (2021-05-10T19:00:49Z) - Visualization of Deep Transfer Learning In SAR Imagery [0.0]
eo shipデータセットでトレーニングされたネットワークの深い機能を活用するために、転送学習を検討する。
クラスアクティベーションマップの形でネットワークアクティベーションを調べることで、ディープネットワークが新しいモダリティをどのように解釈するかを知ることができます。
論文 参考訳(メタデータ) (2021-03-20T00:16:15Z) - MAF: Multimodal Alignment Framework for Weakly-Supervised Phrase
Grounding [74.33171794972688]
本稿では,詳細な視覚表現と視覚認識言語表現を活用することで,句オブジェクトの関連性をモデル化するアルゴリズムを提案する。
広く採用されているFlickr30kデータセットで実施された実験は、既存の弱教師付き手法よりも大幅に改善されている。
論文 参考訳(メタデータ) (2020-10-12T00:43:52Z) - A Convolutional Neural Network with Parallel Multi-Scale Spatial Pooling
to Detect Temporal Changes in SAR Images [43.56177583903999]
合成開口レーダ(SAR)画像変化検出では,ノイズ差画像から変化する情報を活用することは極めて困難である。
雑音差画像から変化した情報を利用するマルチスケール空間プーリング(MSSP)ネットワークを提案する。
論文 参考訳(メタデータ) (2020-05-22T03:37:30Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。