論文の概要: Locality-preserving Directions for Interpreting the Latent Space of
Satellite Image GANs
- arxiv url: http://arxiv.org/abs/2309.14883v1
- Date: Tue, 26 Sep 2023 12:29:36 GMT
- ステータス: 処理完了
- システム内更新日: 2023-09-27 13:55:18.795692
- Title: Locality-preserving Directions for Interpreting the Latent Space of
Satellite Image GANs
- Title(参考訳): 衛星画像GANの潜時空間解釈のための局所保存方向
- Authors: Georgia Kourmouli, Nikos Kostagiolas, Yannis Panagakis, Mihalis A.
Nicolaou
- Abstract要約: 本稿では,ウェーブレットをベースとしたGAN(Generative Adversarial Networks)の潜伏空間を解釈する局所性認識手法を提案する。
局所性を保存することに集中して,提案手法は事前学習したGANの重み空間を分解し,解釈可能な方向を復元することができる。
- 参考スコア(独自算出の注目度): 20.010911311234718
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We present a locality-aware method for interpreting the latent space of
wavelet-based Generative Adversarial Networks (GANs), that can well capture the
large spatial and spectral variability that is characteristic to satellite
imagery. By focusing on preserving locality, the proposed method is able to
decompose the weight-space of pre-trained GANs and recover interpretable
directions that correspond to high-level semantic concepts (such as
urbanization, structure density, flora presence) - that can subsequently be
used for guided synthesis of satellite imagery. In contrast to typically used
approaches that focus on capturing the variability of the weight-space in a
reduced dimensionality space (i.e., based on Principal Component Analysis,
PCA), we show that preserving locality leads to vectors with different angles,
that are more robust to artifacts and can better preserve class information.
Via a set of quantitative and qualitative examples, we further show that the
proposed approach can outperform both baseline geometric augmentations, as well
as global, PCA-based approaches for data synthesis in the context of data
augmentation for satellite scene classification.
- Abstract(参考訳): 本稿では,衛星画像に特有の大きな空間的・スペクトル的変動をよく捉えた,ウェーブレット型生成逆ネットワーク(gans)の潜在空間を解釈する局所性認識手法を提案する。
局所性を保存することに集中して、事前学習したGANの重量空間を分解し、衛星画像のガイド合成に使用できる高レベルの意味概念(都市化、構造密度、植物相の存在など)に対応する解釈可能な方向を復元することができる。
減次元空間における重み空間の変動性(すなわち主成分分析(pca)に基づく)を捉えることに焦点を当てた一般的な手法とは対照的に、局所性を保つことは異なる角度のベクトルにつながり、アーティファクトに対してより頑健であり、クラス情報をよりよく保存できることを示す。
定量的および定性的な例の集合により,提案手法は,衛星シーン分類におけるデータ拡張の文脈において,データ合成のためのグローバルなPCAベースのアプローチと同様に,ベースライン幾何学的拡張よりも優れていることを示す。
関連論文リスト
- Leveraging edge detection and neural networks for better UAV localization [5.781342655426309]
地球航法衛星システム(GNSS)を欠いた環境下で無人航空機(UAV)をジオローカライズするための新しい手法を提案する。
現在の最先端技術では、オフラインで訓練されたエンコーダを使用して、UAVの現在のビューのベクトル表現(埋め込み)を生成する。
本研究では,これらの手法の性能を画像の前処理によって大幅に向上し,エッジを抽出できることを実証する。
論文 参考訳(メタデータ) (2024-04-09T10:56:46Z) - View Consistent Purification for Accurate Cross-View Localization [59.48131378244399]
本稿では,屋外ロボットのための微細な自己局在化手法を提案する。
提案手法は,既存のクロスビューローカライゼーション手法の限界に対処する。
これは、動的環境における知覚を増強する初めての疎視のみの手法である。
論文 参考訳(メタデータ) (2023-08-16T02:51:52Z) - Discovering Class-Specific GAN Controls for Semantic Image Synthesis [73.91655061467988]
本稿では,事前訓練されたSISモデルの潜在空間において,空間的に不整合なクラス固有方向を求める新しい手法を提案する。
提案手法によって検出される潜在方向は,セマンティッククラスの局所的な外観を効果的に制御できることを示す。
論文 参考訳(メタデータ) (2022-12-02T21:39:26Z) - Unsupervised Discovery of Semantic Concepts in Satellite Imagery with
Style-based Wavelet-driven Generative Models [27.62417543307831]
本稿では,衛星画像の広帯域合成が可能な,最初の事前学習型およびウェーブレット型GANモデルを提案する。
ネットワークの中間的アクティベーションを解析することにより、解釈可能なセマンティックな方向を多数発見できることが示される。
論文 参考訳(メタデータ) (2022-08-03T14:19:24Z) - Incorporating Texture Information into Dimensionality Reduction for
High-Dimensional Images [65.74185962364211]
距離ベース次元削減手法に周辺情報を組み込む手法を提案する。
画像パッチを比較する異なる手法の分類に基づいて,様々なアプローチを探索する。
論文 参考訳(メタデータ) (2022-02-18T13:17:43Z) - IGAN: Inferent and Generative Adversarial Networks [0.0]
IGANは複雑な高次元データ分布における生成モデルと推論モデルの両方を学習する。
画像と潜伏空間の両方で敵の戦略を書き換えることで、従来のGANフレームワークを推論で拡張する。
論文 参考訳(メタデータ) (2021-09-27T21:48:35Z) - Do Not Escape From the Manifold: Discovering the Local Coordinates on
the Latent Space of GANs [7.443321740418409]
本稿では,GAN(Generative Adversarial Networks)の中間潜伏空間上での局所幾何学的軌道方向を求める手法を提案する。
潜在空間の内在的な間隔によって動機づけられた基礎は、部分ネットワークの微分の低ランク近似問題を解くことによって発見される。
論文 参考訳(メタデータ) (2021-06-13T10:29:42Z) - Low-Rank Subspaces in GANs [101.48350547067628]
この研究は、GAN生成をより正確に制御できる低ランクな部分空間を導入している。
LowRankGAN は属性多様体の低次元表現を見つけることができる。
さまざまなデータセットでトレーニングされた最先端のGANモデル(StyleGAN2やBigGANなど)の実験は、私たちのLowRankGANの有効性を示しています。
論文 参考訳(メタデータ) (2021-06-08T16:16:32Z) - Joint Characterization of Multiscale Information in High Dimensional
Data [0.0]
グローバルアプローチとローカルアプローチの相乗効果を生かした多スケール共同評価手法を提案します。
関節の特徴は, PCA や t-sne のいずれからも明らかでない信号の検出と分離が可能であることを示す。
論文 参考訳(メタデータ) (2021-02-18T23:33:00Z) - Joint and Progressive Subspace Analysis (JPSA) with Spatial-Spectral
Manifold Alignment for Semi-Supervised Hyperspectral Dimensionality Reduction [48.73525876467408]
本稿では,超スペクトル部分空間解析のための新しい手法を提案する。
この手法はジョイント・アンド・プログレッシブ・サブスペース分析(JPSA)と呼ばれる。
2つの広帯域超スペクトルデータセットに対して提案したJPSAの優位性と有効性を示す実験を行った。
論文 参考訳(メタデータ) (2020-09-21T16:29:59Z) - Closed-Form Factorization of Latent Semantics in GANs [65.42778970898534]
画像合成のために訓練されたGAN(Generative Adversarial Networks)の潜在空間に、解釈可能な次元の豊富なセットが出現することが示されている。
本研究では,GANが学習した内部表現について検討し,その基礎となる変動要因を教師なしで明らかにする。
本稿では,事前学習した重みを直接分解することで,潜在意味発見のためのクローズドフォーム因数分解アルゴリズムを提案する。
論文 参考訳(メタデータ) (2020-07-13T18:05:36Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。