論文の概要: Multi-Task Learning Enhanced Single Image De-Raining
- arxiv url: http://arxiv.org/abs/2003.09689v2
- Date: Mon, 11 May 2020 13:23:06 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-21 13:15:54.875473
- Title: Multi-Task Learning Enhanced Single Image De-Raining
- Title(参考訳): マルチタスク学習による単一画像デレイニング
- Authors: Yulong Fan, Rong Chen, Bo Li
- Abstract要約: 画像の降雨除去はコンピュータビジョンにおいて重要な課題であり、より多くの人々の注目を集めている。
本稿では,1枚の画像からレインストリークの視覚効果を除去する非自明な問題に対処する。
本手法は,降雨除去のためのマルチタスク回帰モデルにおいて,様々な意味制約タスクを組み合わさったものである。
- 参考スコア(独自算出の注目度): 9.207797392774465
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Rain removal in images is an important task in computer vision filed and
attracting attentions of more and more people. In this paper, we address a
non-trivial issue of removing visual effect of rain streak from a single image.
Differing from existing work, our method combines various semantic constraint
task in a proposed multi-task regression model for rain removal. These tasks
reinforce the model's capabilities from the content, edge-aware, and local
texture similarity respectively. To further improve the performance of
multi-task learning, we also present two simple but powerful dynamic weighting
algorithms. The proposed multi-task enhanced network (MENET) is a powerful
convolutional neural network based on U-Net for rain removal research, with a
specific focus on utilize multiple tasks constraints and exploit the synergy
among them to facilitate the model's rain removal capacity. It is noteworthy
that the adaptive weighting scheme has further resulted in improved network
capability. We conduct several experiments on synthetic and real rain images,
and achieve superior rain removal performance over several selected
state-of-the-art (SOTA) approaches. The overall effect of our method is
impressive, even in the decomposition of heavy rain and rain streak
accumulation.The source code and some results can be found
at:https://github.com/SumiHui/MENET.
- Abstract(参考訳): 画像の降雨除去はコンピュータビジョンにおいて重要な課題であり、より多くの人々の注目を集めている。
本稿では,1枚の画像からレインストリークの視覚効果を除去する非自明な問題に対処する。
本手法は,既存の作業と異なり,降雨除去のためのマルチタスク回帰モデルにおいて,様々な意味制約タスクを組み合わせる。
これらのタスクは、それぞれコンテンツ、エッジ認識、およびローカルテクスチャ類似性からモデルの能力を補強する。
マルチタスク学習の性能向上のために,2つの単純だが強力な動的重み付けアルゴリズムを提案する。
提案するマルチタスク拡張ネットワーク(MENET)は,雨量除去のためのU-Netに基づく強力な畳み込みニューラルネットワークである。
また,適応重み付け方式によりネットワーク性能が向上したことも注目に値する。
人工降雨画像および実雨画像に関する実験を複数実施し, 雨の除去性能をsof-the-art (sota) 法で達成した。
本手法の全体的な効果は, 豪雨と豪雨の蓄積を分解しても印象的であり, ソースコードといくつかの結果はhttps://github.com/SumiHui/MENET.comで確認できる。
関連論文リスト
- Dynamic Association Learning of Self-Attention and Convolution in Image
Restoration [56.49098856632478]
CNNとSelf attentionは、画像修復における自己意識と畳み込みの動的関連学習のためのマルチメディアアプリケーションにおいて大きな成功を収めている。
本稿では,その利点を活かし,その欠点を抑え,高品質で効率的な塗布を実現するためのアソシエーション学習手法を提案する。
論文 参考訳(メタデータ) (2023-11-09T05:11:24Z) - Contrastive Learning Based Recursive Dynamic Multi-Scale Network for
Image Deraining [47.764883957379745]
雨のストリークは撮影画像の可視性を著しく低下させる。
既存のディープラーニングベースの画像デライニング手法では、手作業で構築されたネットワークを使用して、雨の降った画像から明確な画像への直接投影を学習する。
本稿では,雨天画像と澄んだ画像との相関関係を考察した,対照的な学習に基づく画像デライニング手法を提案する。
論文 参考訳(メタデータ) (2023-05-29T13:51:41Z) - Multi-scale Attentive Image De-raining Networks via Neural Architecture
Search [23.53770663034919]
我々は,画像デラリニングのための高性能なマルチスケール注意型ニューラルネットワーク探索(MANAS)フレームワークを開発した。
提案手法は,画像デライニング作業に好適な複数のフレキシブルモジュールを備えた,新しいマルチスケールアテンション検索空間を定式化する。
ディライニングネットワークの内部マルチスケール注意アーキテクチャは、勾配に基づく探索アルゴリズムによって自動的に探索される。
論文 参考訳(メタデータ) (2022-07-02T03:47:13Z) - RCDNet: An Interpretable Rain Convolutional Dictionary Network for
Single Image Deraining [49.99207211126791]
雨畳み込み辞書ネットワーク(RCDNet)と呼ばれる,新しい深層アーキテクチャを具体的に構築する。
RCDNetは雨害の本質的な先行を埋め込んでおり、明確な解釈性を持っている。
このような解釈可能なネットワークをエンドツーエンドにトレーニングすることにより、関連するすべてのレインカーネルと近位演算子を自動的に抽出することができる。
論文 参考訳(メタデータ) (2021-07-14T16:08:11Z) - Beyond Monocular Deraining: Parallel Stereo Deraining Network Via
Semantic Prior [103.49307603952144]
ほとんどの既存の脱雨アルゴリズムは単一の入力画像のみを使用し、クリーンな画像の復元を目指しています。
本稿では,ステレオ画像とセマンティック情報の両方を利用するPaired Rain Removal Network(PRRNet)を提案する。
単分子および新たに提案したステレオ降雨データセットの両方の実験により,提案手法が最先端の性能を達成することを示す。
論文 参考訳(メタデータ) (2021-05-09T04:15:10Z) - Multi-Scale Hourglass Hierarchical Fusion Network for Single Image
Deraining [8.964751500091005]
雨のひもはサイズ、方向および密度で頻繁に変わる深刻なぼやけおよび視覚質の低下をもたらします。
現在のCNN方式は, 降雨特性の描写や, 可視性に乏しい環境下でのイメージの復元に限られている。
本稿では,マルチスケール抽出,階層蒸留,情報集約による雨天の特徴を正確に把握するために,マルチスケールのHH2F-Netを提案する。
論文 参考訳(メタデータ) (2021-04-25T08:27:01Z) - A Model-driven Deep Neural Network for Single Image Rain Removal [52.787356046951494]
完全解釈可能なネットワーク構造を持つモデル駆動型ディープニューラルネットワークを提案する。
雨を表現するための畳み込み辞書学習機構に基づいて,新しい単一画像デレーニングモデルを提案する。
すべてのレインカーネルとオペレータは自動的に抽出され、レイン層とクリーンなバックグラウンド層の両方の特徴を忠実に特徴付けることができる。
論文 参考訳(メタデータ) (2020-05-04T09:13:25Z) - Physical Model Guided Deep Image Deraining [10.14977592107907]
降雨画像の劣化により、多くのコンピュータビジョンシステムが動作しないため、単一画像のデライン化は緊急の課題である。
本研究では, 物理モデルを用いた単一画像デライニングのための新しいネットワークを提案する。
論文 参考訳(メタデータ) (2020-03-30T07:08:13Z) - Multi-Scale Progressive Fusion Network for Single Image Deraining [84.0466298828417]
空気中の雨のストリークは、位置からカメラまでの距離が異なるため、様々なぼやけた度合いや解像度で現れる。
同様の降雨パターンは、雨像やマルチスケール(またはマルチレゾリューション)バージョンで見ることができる。
本研究では,入力画像のスケールと階層的な深部特徴の観点から,雨天のマルチスケール協調表現について検討する。
論文 参考訳(メタデータ) (2020-03-24T17:22:37Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。