論文の概要: Continual Unsupervised Domain Adaptation for Semantic Segmentation using
a Class-Specific Transfer
- arxiv url: http://arxiv.org/abs/2208.06507v1
- Date: Fri, 12 Aug 2022 21:30:49 GMT
- ステータス: 処理完了
- システム内更新日: 2022-08-16 13:38:38.526694
- Title: Continual Unsupervised Domain Adaptation for Semantic Segmentation using
a Class-Specific Transfer
- Title(参考訳): クラス特異的転送を用いた意味セグメンテーションのための連続的教師なしドメイン適応
- Authors: Robert A. Marsden, Felix Wiewel, Mario D\"obler, Yang Yang, and Bin
Yang
- Abstract要約: セグメンテーションモデルは 目に見えない領域に一般化しません
2つのクラス条件のAdaIN層を組み込んだ軽量なスタイル転送フレームワークを提案する。
合成シーケンスに対する我々のアプローチを広く検証し、さらに実領域からなる挑戦的なシーケンスを提案する。
- 参考スコア(独自算出の注目度): 9.46677024179954
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: In recent years, there has been tremendous progress in the field of semantic
segmentation. However, one remaining challenging problem is that segmentation
models do not generalize to unseen domains. To overcome this problem, one
either has to label lots of data covering the whole variety of domains, which
is often infeasible in practice, or apply unsupervised domain adaptation (UDA),
only requiring labeled source data. In this work, we focus on UDA and
additionally address the case of adapting not only to a single domain, but to a
sequence of target domains. This requires mechanisms preventing the model from
forgetting its previously learned knowledge. To adapt a segmentation model to a
target domain, we follow the idea of utilizing light-weight style transfer to
convert the style of labeled source images into the style of the target domain,
while retaining the source content. To mitigate the distributional shift
between the source and the target domain, the model is fine-tuned on the
transferred source images in a second step. Existing light-weight style
transfer approaches relying on adaptive instance normalization (AdaIN) or
Fourier transformation still lack performance and do not substantially improve
upon common data augmentation, such as color jittering. The reason for this is
that these methods do not focus on region- or class-specific differences, but
mainly capture the most salient style. Therefore, we propose a simple and
light-weight framework that incorporates two class-conditional AdaIN layers. To
extract the class-specific target moments needed for the transfer layers, we
use unfiltered pseudo-labels, which we show to be an effective approximation
compared to real labels. We extensively validate our approach (CACE) on a
synthetic sequence and further propose a challenging sequence consisting of
real domains. CACE outperforms existing methods visually and quantitatively.
- Abstract(参考訳): 近年,セマンティクスセグメンテーションの分野は飛躍的な進歩を遂げている。
しかし、残る課題の1つは、セグメンテーションモデルが未知の領域に一般化しないことである。
この問題を克服するためには、実際には実現不可能なドメイン全体をカバーする大量のデータをラベル付けするか、あるいはラベル付きソースデータのみを必要とする非教師なしのドメイン適応(UDA)を適用する必要がある。
本研究では、udaに注目し、さらに、単一のドメインだけでなく、対象ドメインのシーケンスにも適応するケースについても取り組んだ。
これは、モデルが事前に学習した知識を忘れないようにするメカニズムを必要とする。
対象領域にセグメンテーションモデルを適応させるために、光源コンテンツを保持しながら、ラベル付きソース画像のスタイルを対象領域のスタイルに変換するために、軽量なスタイル転送を利用するという考え方に従う。
ソースと対象ドメイン間の分布シフトを軽減するために、転送されたソースイメージに対して第2ステップでモデルを微調整する。
アダプティブインスタンス正規化(adain)やフーリエ変換に依存する既存の軽量スタイル転送アプローチは、まだ性能に欠けており、カラージッタリングのような一般的なデータ拡張を実質的に改善していない。
この理由は、これらの手法が地域やクラス固有の違いに焦点を合わせず、主に最も敬遠したスタイルを捉えているためである。
そこで本研究では,2つのクラス条件AdaINレイヤを組み込んだ,シンプルで軽量なフレームワークを提案する。
転送層に必要なクラス固有のターゲットモーメントを抽出するために,フィルタされていない擬似ラベルを用い,実ラベルと比較して有効に近似できることを示した。
合成シーケンス上での我々のアプローチ(CACE)を広範囲に検証し、さらに実領域からなる挑戦的なシーケンスを提案する。
CACEは既存の手法を視覚的に定量的に上回る。
関連論文リスト
- Target and Task specific Source-Free Domain Adaptive Image Segmentation [73.78898054277538]
ソースフリー領域適応画像分割のための2段階のアプローチを提案する。
我々は,高エントロピー領域を抑えつつ,ターゲット固有の擬似ラベルを生成することに注力する。
第2段階では、タスク固有の表現にネットワークを適用することに重点を置いている。
論文 参考訳(メタデータ) (2022-03-29T17:50:22Z) - Domain Adaptation via Prompt Learning [39.97105851723885]
Unsupervised Domain Adaption (UDA) は、十分にアノテーションされたソースドメインから学習したモデルをターゲットドメインに適応させることを目的としている。
我々は,Prompt Learning (DAPL) によるドメイン適応という,UDAのための新しいプロンプト学習パラダイムを導入する。
論文 参考訳(メタデータ) (2022-02-14T13:25:46Z) - Style Mixing and Patchwise Prototypical Matching for One-Shot
Unsupervised Domain Adaptive Semantic Segmentation [21.01132797297286]
ワンショットの教師なしドメイン適応では、セグメンタはトレーニング中にラベルなしのターゲットイメージを1つしか見ることができない。
このような計算負担を効果的に軽減できるOSUDA法を提案する。
提案手法は,ドメイン適応型セマンティックセグメンテーションのための2つの一般的なベンチマーク上で,最先端性能を実現する。
論文 参考訳(メタデータ) (2021-12-09T02:47:46Z) - The Norm Must Go On: Dynamic Unsupervised Domain Adaptation by
Normalization [10.274423413222763]
ドメイン適応は、学習したモデルを、ドメインシフトやデータ分散の変更など、新しいシナリオに適応するために不可欠である。
現在のアプローチは通常、シフトしたドメインから大量のラベル付きまたはラベルなしのデータを必要とする。
本稿では,この問題を解決するために動的教師なし適応(DUA)を提案する。
論文 参考訳(メタデータ) (2021-12-01T12:43:41Z) - Domain Adaptive Semantic Segmentation without Source Data [50.18389578589789]
モデルがソースドメイン上で事前学習されていることを前提として、ソースデータのないドメイン適応セマンティックセマンティックセマンティックセマンティクスについて検討する。
本稿では,この課題に対して,肯定的学習と否定的学習という2つの要素を用いた効果的な枠組みを提案する。
私たちのフレームワークは、パフォーマンスをさらに向上するために、他のメソッドに簡単に実装および組み込むことができます。
論文 参考訳(メタデータ) (2021-10-13T04:12:27Z) - Cross-domain Contrastive Learning for Unsupervised Domain Adaptation [108.63914324182984]
教師なしドメイン適応(Unsupervised domain adapt、UDA)は、完全にラベル付けされたソースドメインから異なるラベル付けされていないターゲットドメインに学習した知識を転送することを目的としている。
対照的な自己教師型学習に基づいて、トレーニングとテストセット間のドメインの相違を低減するために、機能を整列させます。
論文 参考訳(メタデータ) (2021-06-10T06:32:30Z) - Semi-Supervised Domain Adaptation with Prototypical Alignment and
Consistency Learning [86.6929930921905]
本稿では,いくつかの対象サンプルがラベル付けされていれば,ドメインシフトに対処するのにどの程度役立つか検討する。
ランドマークの可能性を最大限に追求するために、ランドマークから各クラスのターゲットプロトタイプを計算するプロトタイプアライメント(PA)モジュールを組み込んでいます。
具体的には,ラベル付き画像に深刻な摂動を生じさせ,PAを非自明にし,モデル一般化性を促進する。
論文 参考訳(メタデータ) (2021-04-19T08:46:08Z) - Instance Level Affinity-Based Transfer for Unsupervised Domain
Adaptation [74.71931918541748]
ILA-DAと呼ばれる適応中のソースからターゲットへの転送に対するインスタンス親和性に基づく基準を提案する。
まず、ソースとターゲットをまたいだ類似および異種サンプルを抽出し、マルチサンプルのコントラスト損失を利用してドメインアライメントプロセスを駆動する信頼性が高く効率的な手法を提案する。
ILA-DAの有効性は、様々なベンチマークデータセットに対する一般的なドメイン適応手法よりも精度が一貫した改善を観察することによって検証する。
論文 参考訳(メタデータ) (2021-04-03T01:33:14Z) - Contradistinguisher: A Vapnik's Imperative to Unsupervised Domain
Adaptation [7.538482310185133]
本研究では,コントラスト特徴を学習するContradistinguisherと呼ばれるモデルを提案する。
Office-31とVisDA-2017における最先端のデータセットを、シングルソースとマルチソースの両方で実現しています。
論文 参考訳(メタデータ) (2020-05-25T19:54:38Z) - Differential Treatment for Stuff and Things: A Simple Unsupervised
Domain Adaptation Method for Semantic Segmentation [105.96860932833759]
最先端のアプローチは、セマンティックレベルのアライメントの実行がドメインシフトの問題に取り組むのに役立つことを証明している。
我々は,物事領域や物事に対する異なる戦略による意味レベルのアライメントを改善することを提案する。
提案手法に加えて,提案手法は,ソースとターゲットドメイン間の最も類似した機能やインスタンス機能を最小化することにより,この問題の緩和に有効であることを示す。
論文 参考訳(メタデータ) (2020-03-18T04:43:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。