論文の概要: Physics-Constrained Cross-Resolution Enhancement Network for Optics-Guided Thermal UAV Image Super-Resolution
- arxiv url: http://arxiv.org/abs/2601.03526v1
- Date: Wed, 07 Jan 2026 02:30:27 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-01-09 02:15:23.17306
- Title: Physics-Constrained Cross-Resolution Enhancement Network for Optics-Guided Thermal UAV Image Super-Resolution
- Title(参考訳): 光学誘導熱UAV画像超解像のための物理拘束型クロスリゾリューション強化ネットワーク
- Authors: Zhicheng Zhao, Fengjiao Peng, Jinquan Yan, Wei Lu, Chenglong Li, Jin Tang,
- Abstract要約: 既存の方法では、光学的特徴を圧縮して熱的特徴次元を整合させて、クロスモーダルアライメントと融合を行う。
我々は,光と熱のモードの相互拡張を実現するためにPCNetを提案する。
また,光誘導に二次元熱伝導を取り入れた物理駆動熱伝導モジュール(PDTM)を提案する。
- 参考スコア(独自算出の注目度): 19.782662020080522
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Optics-guided thermal UAV image super-resolution has attracted significant research interest due to its potential in all-weather monitoring applications. However, existing methods typically compress optical features to match thermal feature dimensions for cross-modal alignment and fusion, which not only causes the loss of high-frequency information that is beneficial for thermal super-resolution, but also introduces physically inconsistent artifacts such as texture distortions and edge blurring by overlooking differences in the imaging physics between modalities. To address these challenges, we propose PCNet to achieve cross-resolution mutual enhancement between optical and thermal modalities, while physically constraining the optical guidance process via thermal conduction to enable robust thermal UAV image super-resolution. In particular, we design a Cross-Resolution Mutual Enhancement Module (CRME) to jointly optimize thermal image super-resolution and optical-to-thermal modality conversion, facilitating effective bidirectional feature interaction across resolutions while preserving high-frequency optical priors. Moreover, we propose a Physics-Driven Thermal Conduction Module (PDTM) that incorporates two-dimensional heat conduction into optical guidance, modeling spatially-varying heat conduction properties to prevent inconsistent artifacts. In addition, we introduce a temperature consistency loss that enforces regional distribution consistency and boundary gradient smoothness to ensure generated thermal images align with real-world thermal radiation principles. Extensive experiments on VGTSR2.0 and DroneVehicle datasets demonstrate that PCNet significantly outperforms state-of-the-art methods on both reconstruction quality and downstream tasks including semantic segmentation and object detection.
- Abstract(参考訳): 光学誘導型熱UAV画像の超高解像度化は、全天候監視への応用の可能性から大きな研究関心を集めている。
しかし、既存の方法では光学的特徴を圧縮して、熱的アライメントと融合の温度特性次元を一致させるのが一般的であり、これは熱超解像に有用な高周波情報の損失を引き起こすだけでなく、テクスチャの歪みやエッジのぼかしといった物理的に不整合なアーティファクトをモダリティ間の画像物理の違いを見極めることによって導入する。
これらの課題に対処するため,我々は,熱伝導による光誘導過程を物理的に制限し,高分解能な熱UAV画像の高分解能化を実現するためにPCNetを提案する。
特に、熱画像の超解像と光-熱変換を協調的に最適化し、高周波光前兆を保ちながら、解像度間での効果的な双方向的特徴相互作用を容易にし、CRME(Cross-Resolution Mutual Enhancement Module)を設計する。
さらに,2次元熱伝導を光学誘導に組み込んだ物理駆動熱伝導モジュール (PDTM) を提案する。
さらに, 局所分布の整合性と境界勾配の滑らかさを強制する温度一貫性損失を導入し, 生成熱画像が実世界の熱放射原理に合致することを確認した。
VGTSR2.0とDroneVehicleデータセットの大規模な実験により、PCNetは、セマンティックセグメンテーションやオブジェクト検出を含む、再構築品質と下流タスクの両方において、最先端の手法を大幅に上回っていることが示された。
関連論文リスト
- Temperature calibration of surface emissivities with an improved thermal image enhancement network [8.19646340914779]
赤外線サーモグラフィーは、物質放射率の変化による温度精度の持続的な課題に直面している。
本研究では、温度補正と画像強調を統一する物理誘導型ニューラルネットワークフレームワークを提案する。
論文 参考訳(メタデータ) (2025-06-20T07:40:05Z) - Building Vision Models upon Heat Conduction [66.1594989193046]
本研究は, 物理的熱伝導原理に基づく熱伝導演算子 (HCO) について紹介する。
HCOは熱源としてイメージパッチを概念化し、適応的な熱エネルギー拡散を通じて相関をモデル化する。
vHeatは、Swin-Transformerと比較して最大で3倍のスループット、GPUメモリ割り当ての80%削減、計算FLOPの35%削減を実現している。
論文 参考訳(メタデータ) (2024-05-26T12:58:04Z) - Physics-Inspired Degradation Models for Hyperspectral Image Fusion [61.743696362028246]
ほとんどの融合法は、融合アルゴリズム自体にのみ焦点をあて、分解モデルを見落としている。
我々は、LR-HSIとHR-MSIの劣化をモデル化するための物理インスパイアされた劣化モデル(PIDM)を提案する。
提案したPIDMは,既存の核融合法における核融合性能を向上させることができる。
論文 参考訳(メタデータ) (2024-02-04T09:07:28Z) - TCI-Former: Thermal Conduction-Inspired Transformer for Infrared Small
Target Detection [58.00308680221481]
赤外線小目標検出(ISTD)は国家安全保障に重要であり、軍事分野で広く応用されている。
ほとんどの ISTD ネットワークは特徴抽出ブロックや特徴融合モジュールの設計に重点を置いているが、特徴写像の進化の観点から ISTD プロセスを記述することは稀である。
熱伝導理論に基づく熱伝導型変圧器(TCI-Former)を提案する。
論文 参考訳(メタデータ) (2024-02-03T05:51:22Z) - CoReFusion: Contrastive Regularized Fusion for Guided Thermal
Super-Resolution [0.0]
超解像法は、低コストで低解像度の熱センサーを用いて、高精度な高解像度熱画像の再現を行うことができる。
熱画像のガイド超解像のための新しいデータ融合フレームワークと正規化手法を提案する。
論文 参考訳(メタデータ) (2023-04-03T14:21:41Z) - Does Thermal Really Always Matter for RGB-T Salient Object Detection? [153.17156598262656]
本稿では,RGB-T有意物体検出(SOD)タスクを解決するために,TNetというネットワークを提案する。
本稿では,画像のグローバル照度を推定するためのグローバル照度推定モジュールを提案する。
一方, 2段階の局所化と相補化モジュールを導入し, 熱的特徴の物体位置化キューと内部整合キューをRGBモダリティに転送する。
論文 参考訳(メタデータ) (2022-10-09T13:50:12Z) - Photothermal-SR-Net: A Customized Deep Unfolding Neural Network for
Photothermal Super Resolution Imaging [9.160910754837756]
本論文では, 基礎物理を考慮した深部展開によるデコンボリューションを行う光熱SR-Netを提案する。
光熱SR-Netは、各畳み込み層の得られた熱画像に訓練されたブロック分散しきい値を適用します。
論文 参考訳(メタデータ) (2021-04-21T14:41:04Z) - Leveraging Spatial and Photometric Context for Calibrated Non-Lambertian
Photometric Stereo [61.6260594326246]
空間と測光の両方を同時に活用できる効率的な完全畳み込みアーキテクチャを提案する。
分離可能な4D畳み込みと2D熱マップを使うことで、サイズが小さくなり、効率が向上する。
論文 参考訳(メタデータ) (2021-03-22T18:06:58Z) - Exploring Thermal Images for Object Detection in Underexposure Regions
for Autonomous Driving [67.69430435482127]
アンダーエクスポージャー地域は、安全な自動運転のための周囲の完全な認識を構築するのに不可欠である。
サーマルカメラが利用可能になったことで、他の光学センサーが解釈可能な信号を捉えていない地域を探索するための重要な代替手段となった。
本研究は,可視光画像から熱画像へ学習を伝達するためのスタイル伝達手法を用いたドメイン適応フレームワークを提案する。
論文 参考訳(メタデータ) (2020-06-01T09:59:09Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。