論文の概要: RestoreDet: Degradation Equivariant Representation for Object Detection
in Low Resolution Images
- arxiv url: http://arxiv.org/abs/2201.02314v1
- Date: Fri, 7 Jan 2022 03:40:23 GMT
- ステータス: 処理完了
- システム内更新日: 2022-01-10 19:45:20.519365
- Title: RestoreDet: Degradation Equivariant Representation for Object Detection
in Low Resolution Images
- Title(参考訳): RestoreDet:低解像度画像における物体検出のための劣化等価表現
- Authors: Ziteng Cui, Yingying Zhu, Lin Gu, Guo-Jun Qi, Xiaoxiao Li, Peng Gao,
Zenghui Zhang, Tatsuya Harada
- Abstract要約: 劣化した低解像度画像中のオブジェクトを検出するための新しいフレームワークであるRestoreDetを提案する。
CenterNetをベースとした本フレームワークは, 既存手法と比較して, 異種劣化状況に直面する場合に比べ, 優れた性能を達成している。
- 参考スコア(独自算出の注目度): 81.91416537019835
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Image restoration algorithms such as super resolution (SR) are indispensable
pre-processing modules for object detection in degraded images. However, most
of these algorithms assume the degradation is fixed and known a priori. When
the real degradation is unknown or differs from assumption, both the
pre-processing module and the consequent high-level task such as object
detection would fail. Here, we propose a novel framework, RestoreDet, to detect
objects in degraded low resolution images. RestoreDet utilizes the downsampling
degradation as a kind of transformation for self-supervised signals to explore
the equivariant representation against various resolutions and other
degradation conditions. Specifically, we learn this intrinsic visual structure
by encoding and decoding the degradation transformation from a pair of original
and randomly degraded images. The framework could further take the advantage of
advanced SR architectures with an arbitrary resolution restoring decoder to
reconstruct the original correspondence from the degraded input image. Both the
representation learning and object detection are optimized jointly in an
end-to-end training fashion. RestoreDet is a generic framework that could be
implemented on any mainstream object detection architectures. The extensive
experiment shows that our framework based on CenterNet has achieved superior
performance compared with existing methods when facing variant degradation
situations. Our code would be released soon.
- Abstract(参考訳): super resolution (sr) のような画像復元アルゴリズムは、劣化した画像のオブジェクト検出に必須の事前処理モジュールである。
しかし、これらのアルゴリズムのほとんどは、劣化が固定され、先行性があることを仮定している。
実際の劣化が未知あるいは仮定と異なる場合、事前処理モジュールとオブジェクト検出のような関連するハイレベルタスクの両方が失敗する。
本稿では,劣化した低解像度画像中のオブジェクトを検出するための新しいフレームワークrestoreedetを提案する。
restoredetはダウンサンプリング劣化を、自己教師信号の変換の一種として利用し、様々な解像度や他の劣化条件に対する同変表現を探索する。
具体的には、元の画像とランダムに劣化した画像から劣化変換を符号化して復号することにより、この本質的な視覚構造を学習する。
このフレームワークは、劣化した入力画像から元の対応を再構築するために、任意の解像度復元デコーダを持つ高度なSRアーキテクチャの利点をさらに活用することができる。
表現学習とオブジェクト検出の両方を、エンドツーエンドのトレーニング方法で共同で最適化する。
restoredetは、あらゆるメインストリームのオブジェクト検出アーキテクチャに実装可能な汎用フレームワークである。
大規模な実験により,CenterNetをベースとしたフレームワークは,異種劣化に直面した既存手法に比べて優れた性能を示した。
私たちのコードはまもなくリリースされるでしょう。
関連論文リスト
- OneRestore: A Universal Restoration Framework for Composite Degradation [33.556183375565034]
現実のシナリオでは、画像障害はしばしば複合的な劣化として現れ、低光、迷路、雨、雪といった要素の複雑な相互作用を示す。
本研究では, 複雑な複合劣化シナリオを正確に表現するために, 4つの物理劣化パラダイムを統合した多目的イメージングモデルを提案する。
OneRestoreは、適応的で制御可能なシーン復元のために設計された新しいトランスフォーマーベースのフレームワークである。
論文 参考訳(メタデータ) (2024-07-05T16:27:00Z) - Diff-Restorer: Unleashing Visual Prompts for Diffusion-based Universal Image Restoration [19.87693298262894]
拡散モデルに基づく普遍的な画像復元手法であるDiff-Restorerを提案する。
我々は、事前学習された視覚言語モデルを用いて、劣化した画像から視覚的プロンプトを抽出する。
また、デグレーション対応デコーダを設計し、構造的補正を行い、潜在コードをピクセル領域に変換する。
論文 参考訳(メタデータ) (2024-07-04T05:01:10Z) - Efficient Test-Time Adaptation for Super-Resolution with Second-Order
Degradation and Reconstruction [62.955327005837475]
画像超解像(SR)は,低分解能(LR)から高分解能(HR)へのマッピングを,一対のHR-LRトレーニング画像を用いて学習することを目的としている。
SRTTAと呼ばれるSRの効率的なテスト時間適応フレームワークを提案し、SRモデルを異なる/未知の劣化型でテストドメインに迅速に適応させることができる。
論文 参考訳(メタデータ) (2023-10-29T13:58:57Z) - All-in-one Multi-degradation Image Restoration Network via Hierarchical
Degradation Representation [47.00239809958627]
我々は新しいオールインワン・マルチデグレーション画像復元ネットワーク(AMIRNet)を提案する。
AMIRNetは、クラスタリングによって木構造を段階的に構築することで、未知の劣化画像の劣化表現を学習する。
この木構造表現は、様々な歪みの一貫性と不一致を明示的に反映しており、画像復元の具体的な手がかりとなっている。
論文 参考訳(メタデータ) (2023-08-06T04:51:41Z) - Exploring Resolution and Degradation Clues as Self-supervised Signal for
Low Quality Object Detection [77.3530907443279]
劣化した低解像度画像中の物体を検出するための,新しい自己教師型フレームワークを提案する。
本手法は, 既存手法と比較して, 異変劣化状況に直面する場合に比べ, 優れた性能を示した。
論文 参考訳(メタデータ) (2022-08-05T09:36:13Z) - Hierarchical Similarity Learning for Aliasing Suppression Image
Super-Resolution [64.15915577164894]
エイリアスの影響を抑制するために階層画像超解像ネットワーク(HSRNet)を提案する。
HSRNetは、他の作品よりも定量的かつ視覚的なパフォーマンスを向上し、エイリアスをより効果的に再送信する。
論文 参考訳(メタデータ) (2022-06-07T14:55:32Z) - Spatially-Adaptive Image Restoration using Distortion-Guided Networks [51.89245800461537]
空間的に変化する劣化に苦しむ画像の復元のための学習ベースソリューションを提案する。
本研究では、歪み局所化情報を活用し、画像中の困難な領域に動的に適応するネットワーク設計であるSPAIRを提案する。
論文 参考訳(メタデータ) (2021-08-19T11:02:25Z) - Gated Fusion Network for Degraded Image Super Resolution [78.67168802945069]
本稿では,基本特徴と回復特徴を別々に抽出する二分岐畳み込みニューラルネットワークを提案する。
特徴抽出ステップを2つのタスク非依存ストリームに分解することで、デュアルブランチモデルがトレーニングプロセスを容易にすることができる。
論文 参考訳(メタデータ) (2020-03-02T13:28:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。