論文の概要: Differencing based Self-supervised pretraining for Scene Change
Detection
- arxiv url: http://arxiv.org/abs/2208.05838v1
- Date: Thu, 11 Aug 2022 14:06:32 GMT
- ステータス: 処理完了
- システム内更新日: 2022-08-12 13:24:26.036574
- Title: Differencing based Self-supervised pretraining for Scene Change
Detection
- Title(参考訳): シーン変化検出のための差分型自己教師付き事前学習
- Authors: Vijaya Raghavan T. Ramkumar, Elahe Arani, Bahram Zonooz
- Abstract要約: シーン変化検出(SCD)は、異なる時間に撮影されたシーンを比較して変化を特定する。
ディープニューラルネットワークベースのソリューションは、大量の注釈付きデータを必要とします。
本稿では,特徴差分を用いた識別表現学習のための自己教師付き事前学習(DSP)手法を提案する。
- 参考スコア(独自算出の注目度): 12.525959293825318
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Scene change detection (SCD), a crucial perception task, identifies changes
by comparing scenes captured at different times. SCD is challenging due to
noisy changes in illumination, seasonal variations, and perspective differences
across a pair of views. Deep neural network based solutions require a large
quantity of annotated data which is tedious and expensive to obtain. On the
other hand, transfer learning from large datasets induces domain shift. To
address these challenges, we propose a novel \textit{Differencing
self-supervised pretraining (DSP)} method that uses feature differencing to
learn discriminatory representations corresponding to the changed regions while
simultaneously tackling the noisy changes by enforcing temporal invariance
across views. Our experimental results on SCD datasets demonstrate the
effectiveness of our method, specifically to differences in camera viewpoints
and lighting conditions. Compared against the self-supervised Barlow Twins and
the standard ImageNet pretraining that uses more than a million additional
labeled images, DSP can surpass it without using any additional data. Our
results also demonstrate the robustness of DSP to natural corruptions,
distribution shift, and learning under limited labeled data.
- Abstract(参考訳): 重要な知覚課題であるシーン変化検出(SCD)は、異なる時間に撮影されたシーンを比較して変化を特定する。
SCDは、照明のノイズの変化、季節変動、視点の違いにより、一対のビューで困難である。
ディープニューラルネットワークベースのソリューションでは,大量の注釈データが必要になります。
一方、大規模なデータセットからの転送学習はドメインシフトを引き起こす。
そこで,これらの課題に対処するために,特徴差分法を用いて変化領域に対応する識別表現を学習し,同時に,視点間の時間的不分散を強制することにより,雑音の変化に対処した新しい \textit{differencing self-supervised pretraining (dsp)} 法を提案する。
scdデータセットを用いた実験結果から,提案手法の有効性,特にカメラの視点と照明条件の違いが示された。
自己監督型Barlow Twinsと100万以上のラベル付き画像を使用する標準のImageNetプリトレーニングと比較すると、DSPは追加データを用いることなくそれを上回ることができる。
また, DSPの自然汚職に対する堅牢性, 分布変化, ラベル付きデータによる学習を実証した。
関連論文リスト
- ZeroSCD: Zero-Shot Street Scene Change Detection [2.3020018305241337]
Scene Change Detectionは、コンピュータビジョンとロボティクスにおいて難しいタスクである。
従来の変更検出方法は、これらのイメージペアを入力として、変更を見積もるトレーニングモデルに依存しています。
我々は,ゼロショットシーン変化検出フレームワークであるZeroSCDを提案する。
論文 参考訳(メタデータ) (2024-09-23T17:53:44Z) - BD-MSA: Body decouple VHR Remote Sensing Image Change Detection method
guided by multi-scale feature information aggregation [4.659935767219465]
リモートセンシング画像変化検出(RSCD)の目的は、同じ場所で撮影された両時間画像の違いを検出することである。
深層学習はRSCDタスクに広く使われており、結果認識の点で重要な結果をもたらしている。
論文 参考訳(メタデータ) (2024-01-09T02:53:06Z) - Contrastive Denoising Score for Text-guided Latent Diffusion Image Editing [58.48890547818074]
潜在拡散モデル(LDM)に対するコントラストデノナイジングスコア(CUT)の強力な修正を提案する。
提案手法により,ゼロショット画像から画像への変換とニューラルフィールド(NeRF)の編集が可能となり,入力と出力の間の構造的対応が達成される。
論文 参考訳(メタデータ) (2023-11-30T15:06:10Z) - Bilevel Fast Scene Adaptation for Low-Light Image Enhancement [50.639332885989255]
低照度シーンにおける画像の強調は、コンピュータビジョンにおいて難しいが、広く懸念されている課題である。
主な障害は、異なるシーンにまたがる分散の相違によるモデリングの混乱にある。
上述の潜在対応をモデル化するための双レベルパラダイムを導入する。
エンコーダのシーン非関連な一般化を多様なシーンにもたらすために、双方向学習フレームワークを構築した。
論文 参考訳(メタデータ) (2023-06-02T08:16:21Z) - Deep Metric Learning for Unsupervised Remote Sensing Change Detection [60.89777029184023]
リモートセンシング変化検出(RS-CD)は、マルチテンポラルリモートセンシング画像(MT-RSI)から関連する変化を検出することを目的とする。
既存のRS-CD法の性能は、大規模な注釈付きデータセットのトレーニングによるものである。
本稿では,これらの問題に対処可能なディープメトリック学習に基づく教師なしCD手法を提案する。
論文 参考訳(メタデータ) (2023-03-16T17:52:45Z) - Sketched Multi-view Subspace Learning for Hyperspectral Anomalous Change
Detection [12.719327447589345]
異常変化検出のためのスケッチ付きマルチビューサブスペース学習モデルを提案する。
提案モデルでは,画像ペアからの主要な情報を保存し,計算複雑性を向上させる。
実験は、ベンチマークハイパースペクトルリモートセンシングデータセットと自然なハイパースペクトルデータセットで実施される。
論文 参考訳(メタデータ) (2022-10-09T14:08:17Z) - Semantic-aware Dense Representation Learning for Remote Sensing Image
Change Detection [20.761672725633936]
ディープラーニングに基づく変化検出モデルのトレーニングはラベル付きデータに大きく依存する。
最近のトレンドは、リモートセンシング(RS)データを使用して、教師付きまたは自己教師型学習(SSL)を通じてドメイン内表現を取得することである。
複数のクラスバランス点をサンプリングし,RS画像CDに対する意味認識事前学習を提案する。
論文 参考訳(メタデータ) (2022-05-27T06:08:33Z) - Revisiting Consistency Regularization for Semi-supervised Change
Detection in Remote Sensing Images [60.89777029184023]
教師付きクロスエントロピー(CE)損失に加えて、教師なしCD損失を定式化する半教師付きCDモデルを提案する。
2つの公開CDデータセットを用いて実験を行った結果,提案手法は教師付きCDの性能に近づきやすいことがわかった。
論文 参考訳(メタデータ) (2022-04-18T17:59:01Z) - Semantics-aware Adaptive Knowledge Distillation for Sensor-to-Vision
Action Recognition [131.6328804788164]
本稿では,視覚・センサ・モダリティ(動画)における行動認識を強化するためのフレームワーク,Semantics-Aware Adaptive Knowledge Distillation Networks (SAKDN)を提案する。
SAKDNは複数のウェアラブルセンサーを教師のモダリティとして使用し、RGB動画を学生のモダリティとして使用している。
論文 参考訳(メタデータ) (2020-09-01T03:38:31Z) - Adversarial Semantic Data Augmentation for Human Pose Estimation [96.75411357541438]
本研究では,セマンティックデータ拡張法 (SDA) を提案する。
また,適応的セマンティックデータ拡張 (ASDA) を提案する。
最先端の結果は、挑戦的なベンチマークで得られます。
論文 参考訳(メタデータ) (2020-08-03T07:56:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。