論文の概要: SAR-to-Optical Image Translation via Thermodynamics-inspired Network
- arxiv url: http://arxiv.org/abs/2305.13839v1
- Date: Tue, 23 May 2023 09:02:33 GMT
- ステータス: 処理完了
- システム内更新日: 2023-05-24 17:37:20.563186
- Title: SAR-to-Optical Image Translation via Thermodynamics-inspired Network
- Title(参考訳): sar-to-optical image translation via thermodynamics-inspired network (特集 熱力学)
- Authors: Mingjin Zhang, Jiamin Xu, Chengyu He, Wenteng Shang, Yunsong Li, and
Xinbo Gao
- Abstract要約: 本稿では,SAR-to-Optical Image Translation (S2O-TDN) のための熱力学インスピレーションネットワークを提案する。
S2O-TDNは熱力学理論から導かれた明示的な設計原理に従い、説明可能性の利点を享受する。
公的なSEN1-2データセットの実験は、より繊細なテクスチャとより定量的な結果を持つ現在の手法よりも提案されたS2O-TDNの利点を示している。
- 参考スコア(独自算出の注目度): 68.71771171637677
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Synthetic aperture radar (SAR) is prevalent in the remote sensing field but
is difficult to interpret in human visual perception. Recently, SAR-to-optical
(S2O) image conversion methods have provided a prospective solution for
interpretation. However, since there is a huge domain difference between
optical and SAR images, they suffer from low image quality and geometric
distortion in the produced optical images. Motivated by the analogy between
pixels during the S2O image translation and molecules in a heat field,
Thermodynamics-inspired Network for SAR-to-Optical Image Translation (S2O-TDN)
is proposed in this paper. Specifically, we design a Third-order Finite
Difference (TFD) residual structure in light of the TFD equation of
thermodynamics, which allows us to efficiently extract inter-domain invariant
features and facilitate the learning of the nonlinear translation mapping. In
addition, we exploit the first law of thermodynamics (FLT) to devise an
FLT-guided branch that promotes the state transition of the feature values from
the unstable diffusion state to the stable one, aiming to regularize the
feature diffusion and preserve image structures during S2O image translation.
S2O-TDN follows an explicit design principle derived from thermodynamic theory
and enjoys the advantage of explainability. Experiments on the public SEN1-2
dataset show the advantages of the proposed S2O-TDN over the current methods
with more delicate textures and higher quantitative results.
- Abstract(参考訳): 合成開口レーダ(SAR)はリモートセンシング分野では一般的であるが,人間の視覚知覚では解釈が困難である。
近年,sar-to-optical (s2o) 画像変換手法が提案されている。
しかし、光学画像とsar画像の間には大きな領域差があるため、生成した光学画像の画質の低下と幾何学的歪みに苦しむ。
本稿では,S2O画像翻訳中の画素と熱場中の分子の類似により,SAR-to-Optical Image Translation (S2O-TDN) のための熱力学ネットワークを提案する。
具体的には、熱力学のTFD方程式に照らして3次有限差分(TFD)残差構造を設計し、ドメイン間不変性を効率的に抽出し、非線形変換写像の学習を容易にする。
さらに,熱力学の第1法則を用いて,不安定な拡散状態から安定な状態への特徴値の状態遷移を促進するFLT誘導分岐を考案し,S2O画像翻訳における特徴拡散の規則化と画像構造保存を目的とした。
S2O-TDNは熱力学理論から導かれた明示的な設計原理に従い、説明可能性の利点を享受する。
公的なSEN1-2データセットの実験は、より繊細なテクスチャとより定量的な結果を持つ現在の手法よりも提案されたS2O-TDNの利点を示している。
関連論文リスト
- Zak Phase Induced Topological Nonreciprocity [21.20214270947359]
室温原子中の1次元Su-Schrieffer-Heeger超放射率格子の光学的非相互性について検討した。
本研究は, トポロジカル・非線形デバイスの設計を簡素化し, トポロジカル・トポロジカル・トポロジカル・トポロジカル・トポロジカル・トポロジカル・トポロジカル・トポロジカル・トポロジカル・トポロジカル・トポロジカル・トポロジカル・トポロジカル・トポロジカル・トポロジカル・トポロジカル
論文 参考訳(メタデータ) (2024-09-26T06:12:07Z) - Neural Message Passing Induced by Energy-Constrained Diffusion [79.9193447649011]
本稿では,MPNNのメカニズムを理解するための原理的解釈可能なフレームワークとして,エネルギー制約付き拡散モデルを提案する。
データ構造が(グラフとして)観察されたり、部分的に観察されたり、完全に観察されなかったりした場合に、新しいモデルが有望な性能が得られることを示す。
論文 参考訳(メタデータ) (2024-09-13T17:54:41Z) - Accelerating Diffusion for SAR-to-Optical Image Translation via Adversarial Consistency Distillation [5.234109158596138]
本稿では,SAR-to-optical Image translationのための新しいトレーニングフレームワークを提案する。
本手法では, 画像の明瞭度を保証し, 色変化を最小限に抑えるために, 反復推論ステップの低減に一貫性蒸留を用い, 対角学習を統合した。
その結果,提案手法は生成画像の視覚的品質を維持しつつ,推論速度を131倍向上させることを示した。
論文 参考訳(メタデータ) (2024-07-08T16:36:12Z) - Distilling Diffusion Models into Conditional GANs [90.76040478677609]
複雑な多段階拡散モデルを1段階条件付きGAN学生モデルに蒸留する。
E-LatentLPIPSは,拡散モデルの潜在空間で直接動作する知覚的損失である。
我々は, 最先端の1ステップ拡散蒸留モデルよりも優れた1ステップ発生器を実証した。
論文 参考訳(メタデータ) (2024-05-09T17:59:40Z) - Spatial super-resolution in nanosensing with blinking emitters [79.16635054977068]
本稿では, 点滅型蛍光ナノセンサを用いたメロロジーにおける空間分解能向上手法を提案する。
我々は, 生活科学分野において, 画像解析技術に補完される点滅蛍光センシング剤を日常的に活用できると考えている。
論文 参考訳(メタデータ) (2024-02-27T10:38:05Z) - Controlling Text-to-Image Diffusion by Orthogonal Finetuning [74.21549380288631]
そこで本研究では,テキストから画像への拡散モデルを下流タスクに適用するための原理的な微調整手法であるorthogonal Finetuning(OFT)を提案する。
既存の方法とは異なり、OFTは単位超球上の対のニューロン関係を特徴付ける超球面エネルギーを確実に保存することができる。
我々のOFTフレームワークは、生成品質と収束速度において既存の手法よりも優れていることを実証的に示す。
論文 参考訳(メタデータ) (2023-06-12T17:59:23Z) - Super-resolution enhancement in bi-photon spatial mode demultiplexin [0.0]
レイリーの呪いによる遠方界の強度を測定するイメージングシステムは、光学系の有限開口によって規定される解像度制限である。
空間モードデマルチプレクシング(SPADE)を用いて収集したフィールド情報が最大であることを示す。
論文 参考訳(メタデータ) (2022-12-20T17:40:46Z) - Manifold-aware Synthesis of High-resolution Diffusion from Structural
Imaging [12.96280888284293]
本稿では,高分解能T1w画像からの拡散テンソル(DT)と拡散配向分布関数(dODF)の直接生成のためのネットワークアーキテクチャを提案する。
提案手法は,合成拡散と接地トラス間の分数異方性平均二乗誤差(FA MSE)を23%以上改善する。
構造入力から15秒以内で高分解能拡散画像を生成することができるが,T1w画像のみに依存する拡散推定の限界を認識し,議論する。
論文 参考訳(メタデータ) (2021-08-09T16:00:40Z) - Two-photon resonance fluorescence of two interacting non-identical
quantum emitters [77.34726150561087]
我々は、コヒーレント場によって駆動される相互作用する2つの非負の量子エミッタのシステムについて研究する。
共鳴蛍光スペクトルに2光子ダイナミクスによって印加された特徴は、エミッタ間の距離の変化に特に敏感である。
これは、ポイントライクなソースの超解像イメージングのような応用に利用することができる。
論文 参考訳(メタデータ) (2021-06-04T16:13:01Z) - Invertible Neural Networks for Uncertainty Quantification in
Photoacoustic Imaging [22.690971184202944]
本研究では、条件付き可逆ニューラルネットワーク(cINN)の概念を活用することにより、この特定の不確実性を扱うための新しいアプローチを提案する。
具体的には、組織酸素化と単画素初期圧力スペクトルを全後確率密度に変換するために一般的に用いられる点推定を超えることを提案する。
提示されたアーキテクチャに基づいて、この情報を利用して検出・定量化するだけでなく、不確かさを補う2つのユースケースを実証する。
論文 参考訳(メタデータ) (2020-11-10T14:17:18Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。