論文の概要: Curricular Contrastive Regularization for Physics-aware Single Image
Dehazing
- arxiv url: http://arxiv.org/abs/2303.14218v2
- Date: Thu, 1 Jun 2023 13:36:30 GMT
- ステータス: 処理完了
- システム内更新日: 2023-06-02 23:55:03.142215
- Title: Curricular Contrastive Regularization for Physics-aware Single Image
Dehazing
- Title(参考訳): 物理認識型単一画像デハジングのための曲線コントラスト正則化
- Authors: Yu Zheng, Jiahui Zhan, Shengfeng He, Junyu Dong, and Yong Du
- Abstract要約: 本研究では, コンセンサス空間を対象とし, 非コンセンサス空間ではなく, 新規なコントラスト正規化を提案する。
我々の負は,1)ハズーな画像から,2)既存の手法による対応する復元から,より低い制約を提供することができる。
このユニットは、直交的なコントラスト正規化とともに、C2PNetというデハジングネットワークを確立します。
- 参考スコア(独自算出の注目度): 56.392696439577165
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Considering the ill-posed nature, contrastive regularization has been
developed for single image dehazing, introducing the information from negative
images as a lower bound. However, the contrastive samples are nonconsensual, as
the negatives are usually represented distantly from the clear (i.e., positive)
image, leaving the solution space still under-constricted. Moreover, the
interpretability of deep dehazing models is underexplored towards the physics
of the hazing process. In this paper, we propose a novel curricular contrastive
regularization targeted at a consensual contrastive space as opposed to a
non-consensual one. Our negatives, which provide better lower-bound
constraints, can be assembled from 1) the hazy image, and 2) corresponding
restorations by other existing methods. Further, due to the different
similarities between the embeddings of the clear image and negatives, the
learning difficulty of the multiple components is intrinsically imbalanced. To
tackle this issue, we customize a curriculum learning strategy to reweight the
importance of different negatives. In addition, to improve the interpretability
in the feature space, we build a physics-aware dual-branch unit according to
the atmospheric scattering model. With the unit, as well as curricular
contrastive regularization, we establish our dehazing network, named C2PNet.
Extensive experiments demonstrate that our C2PNet significantly outperforms
state-of-the-art methods, with extreme PSNR boosts of 3.94dB and 1.50dB,
respectively, on SOTS-indoor and SOTS-outdoor datasets.
- Abstract(参考訳): 不適切な性質を考えると、単一の画像デハジングのためにコントラスト正則化が開発され、負の画像からの情報を下界として導入している。
しかし、対照的なサンプルは、通常、負はクリアな(すなわち正の)像から遠ざかって表現され、解空間は下限のままである。
さらに、深層デハジングモデルの解釈性は、ハジング過程の物理に対して過小評価されている。
本稿では, コンセンサスでないコントラスト空間を対象として, 非コンセンサスなコントラスト正規化を提案する。
より低いバウンダリの制約を提供する私たちの負は
1) ぼやけた画像, そして
2) 他の方法による対応する復旧
さらに、鮮明な画像の埋め込みと負の類似性が異なるため、複数のコンポーネントの学習困難は本質的に不均衡である。
この問題に取り組むために,異なる否定の重要性を強調するためにカリキュラム学習戦略をカスタマイズする。
さらに, 特徴空間の解釈性を向上させるため, 大気圧散乱モデルに基づく物理対応二分岐ユニットを構築した。
このユニットとカーキュラーコントラスト正則化により、我々はc2pnetと呼ばれるデハザーズネットワークを確立する。
我々のC2PNetは、SOTS-indoorデータセットとSOTS-outdoorデータセットにおいて、それぞれ3.94dBと1.50dBの極端なPSNRアップで最先端の手法を大幅に上回ることを示した。
関連論文リスト
- When hard negative sampling meets supervised contrastive learning [17.173114048398947]
我々は、微調整フェーズ中にハードネガティブサンプリングを組み込んだ新しい教師付きコントラスト学習目標であるSCHaNeを導入する。
SchaNeは、様々なベンチマークで、トップ1の精度で強いベースラインBEiT-3を上回っている。
提案手法は,ImageNet-1kのベースモデルに対して,86.14%の精度で新たな最先端技術を実現する。
論文 参考訳(メタデータ) (2023-08-28T20:30:10Z) - Deep Intra-Image Contrastive Learning for Weakly Supervised One-Step
Person Search [98.2559247611821]
本稿では,シームズネットワークを用いた画像内コントラスト学習について述べる。
本手法は,弱教師付きワンステップ人物探索手法の最先端性能を実現する。
論文 参考訳(メタデータ) (2023-02-09T12:45:20Z) - CbwLoss: Constrained Bidirectional Weighted Loss for Self-supervised
Learning of Depth and Pose [13.581694284209885]
光度差は、未ラベルのモノクロビデオから深度とカメラのポーズを推定するためにニューラルネットワークを訓練するために使用される。
本稿では,アフィン変換とビュー合成によって生じる流れ場と深さ構造の違いを利用して,移動物体とオクルージョンを取り扱う。
ネットワークを追加することなく、より意味的な情報と文脈的な情報を持つ特徴の差を測定することにより、テクスチャレス領域がモデル最適化に与える影響を緩和する。
論文 参考訳(メタデータ) (2022-12-12T12:18:24Z) - An Embedding-Dynamic Approach to Self-supervised Learning [8.714677279673738]
本稿では,画像の埋め込みを点粒子として扱うとともに,モデル最適化を粒子系の動的過程として考察する。
我々の動的モデルは、類似した画像に対する魅力的な力、局所的な崩壊を避けるための局所的な分散力、そして粒子のグローバルな均質分布を達成するための大域的な分散力を組み合わせた。
論文 参考訳(メタデータ) (2022-07-07T19:56:20Z) - Robust Single Image Dehazing Based on Consistent and Contrast-Assisted
Reconstruction [95.5735805072852]
画像復調モデルのロバスト性を改善するための新しい密度変分学習フレームワークを提案する。
具体的には、デハジングネットワークは、一貫性の規則化されたフレームワークの下で最適化されている。
我々の手法は最先端のアプローチを大きく上回っている。
論文 参考訳(メタデータ) (2022-03-29T08:11:04Z) - Unpaired Deep Image Dehazing Using Contrastive Disentanglement Learning [36.24651058888557]
そこで本稿では,未ペアのクリアでヘイズな画像の集合から,効果的な未ペア学習に基づく画像デハージングネットワークを提案する。
提案手法は,既存の最先端デヘイズ手法に対して良好に機能することを示す。
論文 参考訳(メタデータ) (2022-03-15T06:45:03Z) - Invertible Network for Unpaired Low-light Image Enhancement [78.33382003460903]
本稿では,非可逆的ネットワークを活用して,前処理における低照度画像の強化と,非対向学習により逆向きに通常の照度画像の劣化を図ることを提案する。
対向的損失に加えて、トレーニングの安定性を確保し、より詳細な画像を保存するために、様々な損失関数を設計する。
低照度画像に対するプログレッシブ自己誘導強調処理を提案し,SOTAに対して良好な性能を示す。
論文 参考訳(メタデータ) (2021-12-24T17:00:54Z) - Semantically Contrastive Learning for Low-light Image Enhancement [48.71522073014808]
低照度画像強調(LLE)は、単一のRGB画像の低コントラストと低可視性の問題が好ましくないため、依然として困難である。
LLE(SCL-LLE)のための効果的な意味論的コントラスト学習パラダイムを提案する。
提案手法は6つの独立したクロスシーンデータセット上で,最先端のLLEモデルを上回る。
論文 参考訳(メタデータ) (2021-12-13T07:08:33Z) - Un-Mix: Rethinking Image Mixtures for Unsupervised Visual Representation
Learning [108.999497144296]
近年の先進的な教師なし学習手法では,同じ画像から2つの「ビュー」を学習表現として比較するために,サイムズ様の枠組みを用いている。
この研究は、教師なし学習においてラベル空間上の距離の概念を巻き込み、正対と負対のソフトな類似度をモデルに認識させることを目的としている。
その概念的単純さにもかかわらず、この解 -- 教師なし画像混合(Un-Mix)により、変換された入力と対応する新しいラベル空間からより微妙でより堅牢で一般化された表現を学習できることを実証的に示す。
論文 参考訳(メタデータ) (2020-03-11T17:59:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。