論文の概要: Beyond Degradation Redundancy: Contrastive Prompt Learning for All-in-One Image Restoration
- arxiv url: http://arxiv.org/abs/2504.09973v1
- Date: Mon, 14 Apr 2025 08:24:57 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-04-15 16:51:41.449777
- Title: Beyond Degradation Redundancy: Contrastive Prompt Learning for All-in-One Image Restoration
- Title(参考訳): 劣化冗長性を超えて:オールインワン画像復元のための対照的なプロンプト学習
- Authors: Gang Wu, Junjun Jiang, Kui Jiang, Xianming Liu, Liqiang Nie,
- Abstract要約: コントラスト・プロンプト・ラーニング(Contrastive Prompt Learning, CPL)は、プロンプト・タスクのアライメントを根本的に強化する新しいフレームワークである。
本フレームワークは,パラメータ効率を保ちながら,新たな最先端性能を確立し,統一画像復元のための原理的ソリューションを提供する。
- 参考スコア(独自算出の注目度): 109.38288333994407
- License:
- Abstract: All-in-one image restoration, addressing diverse degradation types with a unified model, presents significant challenges in designing task-specific prompts that effectively guide restoration across multiple degradation scenarios. While adaptive prompt learning enables end-to-end optimization, it often yields overlapping or redundant task representations. Conversely, explicit prompts derived from pretrained classifiers enhance discriminability but may discard critical visual information for reconstruction. To address these limitations, we introduce Contrastive Prompt Learning (CPL), a novel framework that fundamentally enhances prompt-task alignment through two complementary innovations: a \emph{Sparse Prompt Module (SPM)} that efficiently captures degradation-specific features while minimizing redundancy, and a \emph{Contrastive Prompt Regularization (CPR)} that explicitly strengthens task boundaries by incorporating negative prompt samples across different degradation types. Unlike previous approaches that focus primarily on degradation classification, CPL optimizes the critical interaction between prompts and the restoration model itself. Extensive experiments across five comprehensive benchmarks demonstrate that CPL consistently enhances state-of-the-art all-in-one restoration models, achieving significant improvements in both standard multi-task scenarios and challenging composite degradation settings. Our framework establishes new state-of-the-art performance while maintaining parameter efficiency, offering a principled solution for unified image restoration.
- Abstract(参考訳): 統一されたモデルで多様な劣化型に対処するオールインワン画像復元は、複数の劣化シナリオを効果的に修復するタスク固有のプロンプトを設計する上で大きな課題となる。
適応的なプロンプト学習はエンドツーエンドの最適化を可能にするが、重複あるいは冗長なタスク表現をもたらすことが多い。
逆に、事前訓練された分類器から派生した明示的なプロンプトは識別性を向上するが、再構成のために重要な視覚情報を破棄する可能性がある。
これらの制約に対処するため,コントラスト・プロンプト・ラーニング (CPL) を新たに導入した。これは2つの補完的な革新を通じてプロンプト・タスクのアライメントを根本的に強化するフレームワークで,冗長性を最小化しつつ,分解固有の特徴を効率的にキャプチャする \emph{スパース・プロンプト・モジュール (SPM) と,異なる劣化型をまたいだ負のプロンプト・サンプルを組み込むことでタスク境界を明示的に強化する \emph{コントラスト・プロンプト・正規化 (CPR) である。
主に劣化分類に焦点を当てた従来のアプローチとは異なり、CPLはプロンプトと復元モデル自体のクリティカルな相互作用を最適化する。
5つの総合ベンチマークによる大規模な実験により、CPLは最先端のオールインワン復元モデルを一貫して強化し、標準的なマルチタスクシナリオと難しい複合劣化設定の両方において大幅な改善を達成している。
本フレームワークは,パラメータ効率を保ちながら,新たな最先端性能を確立し,統一画像復元のための原理的ソリューションを提供する。
関連論文リスト
- Mixed Degradation Image Restoration via Local Dynamic Optimization and Conditional Embedding [67.57487747508179]
マルチインワン画像復元 (IR) は, 一つのモデルで全ての種類の劣化画像復元を処理し, 大幅な進歩を遂げている。
本稿では,単一と混合の分解で画像を効果的に復元できる新しいマルチインワンIRモデルを提案する。
論文 参考訳(メタデータ) (2024-11-25T09:26:34Z) - PromptHSI: Universal Hyperspectral Image Restoration with Vision-Language Modulated Frequency Adaptation [28.105125164852367]
本稿では,初のユニバーサルAiO HSI復元フレームワークであるPromptHSIを提案する。
提案手法では,テキストプロンプトを強度とバイアスコントローラに分解し,回復過程を効果的に導く。
我々のアーキテクチャは、さまざまな劣化シナリオにおいて、きめ細かい回復とグローバルな情報復元の両方に優れています。
論文 参考訳(メタデータ) (2024-11-24T17:08:58Z) - Perceive-IR: Learning to Perceive Degradation Better for All-in-One Image Restoration [33.163161549726446]
Perceive-IRは、微細な画質制御を実現するために設計されたオールインワン画像復元装置である。
素早い学習の段階では、素早い学習を活用し、3段階の品質レベルを識別できるきめ細かい品質知覚器を得る。
修復段階では,修復プロセスをさらに促進するために,意味的誘導モジュールとコンパクトな特徴抽出を提案する。
論文 参考訳(メタデータ) (2024-08-28T17:58:54Z) - Restorer: Removing Multi-Degradation with All-Axis Attention and Prompt Guidance [12.066756224383827]
textbfRestorerはトランスフォーマーベースのオールインワン画像復元モデルである。
追加のトレーニングを必要とせずに、現実世界のシナリオで複合的な劣化を処理することができる。
推論中は効率が良く、現実世界の応用の可能性も示唆している。
論文 参考訳(メタデータ) (2024-06-18T13:18:32Z) - SPIRE: Semantic Prompt-Driven Image Restoration [66.26165625929747]
セマンティック・復元型画像復元フレームワークであるSPIREを開発した。
本手法は,復元強度の量的仕様を言語ベースで記述することで,より詳細な指導を支援する最初のフレームワークである。
本実験は, SPIREの修復性能が, 現状と比較して優れていることを示すものである。
論文 参考訳(メタデータ) (2023-12-18T17:02:30Z) - Cross-Consistent Deep Unfolding Network for Adaptive All-In-One Video
Restoration [78.14941737723501]
オールインワンVRのためのクロスコンセントディープ・アンフォールディング・ネットワーク(CDUN)を提案する。
2つのカスケード手順を編成することにより、CDUNは様々な劣化に対する適応的な処理を達成する。
さらに、より隣接するフレームからの情報を活用するために、ウィンドウベースのフレーム間融合戦略を導入する。
論文 参考訳(メタデータ) (2023-09-04T14:18:00Z) - Self-regulating Prompts: Foundational Model Adaptation without
Forgetting [112.66832145320434]
本稿では,PromptSRCと呼ばれる自己正規化フレームワークを提案する。
PromptSRCはタスク固有の汎用表現とタスクに依存しない汎用表現の両方に最適化するプロンプトを導く。
論文 参考訳(メタデータ) (2023-07-13T17:59:35Z) - Implicit Subspace Prior Learning for Dual-Blind Face Restoration [66.67059961379923]
新しい暗黙的サブスペース事前学習(ISPL)フレームワークが、二重盲顔復元の一般的な解決策として提案されている。
実験の結果,既存の最先端手法に対するISPLの認識歪改善が顕著であった。
論文 参考訳(メタデータ) (2020-10-12T08:04:24Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。