論文の概要: Source-Free Open Compound Domain Adaptation in Semantic Segmentation
- arxiv url: http://arxiv.org/abs/2106.03422v1
- Date: Mon, 7 Jun 2021 08:38:41 GMT
- ステータス: 処理完了
- システム内更新日: 2021-06-08 18:01:46.677799
- Title: Source-Free Open Compound Domain Adaptation in Semantic Segmentation
- Title(参考訳): 意味セグメンテーションにおけるソースフリーオープン化合物ドメイン適応
- Authors: Yuyang Zhao, Zhun Zhong, Zhiming Luo, Gim Hee Lee, Nicu Sebe
- Abstract要約: SF-OCDAでは、ターゲットモデルを学習するために、ソース事前訓練されたモデルとターゲットデータのみが利用可能である。
そこで我々は,Cross-Patch Style Swap (CPSS)を提案する。
提案手法は,C-Drivingデータセット上で最先端の結果を生成する。
- 参考スコア(独自算出の注目度): 99.82890571842603
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In this work, we introduce a new concept, named source-free open compound
domain adaptation (SF-OCDA), and study it in semantic segmentation. SF-OCDA is
more challenging than the traditional domain adaptation but it is more
practical. It jointly considers (1) the issues of data privacy and data storage
and (2) the scenario of multiple target domains and unseen open domains. In
SF-OCDA, only the source pre-trained model and the target data are available to
learn the target model. The model is evaluated on the samples from the target
and unseen open domains. To solve this problem, we present an effective
framework by separating the training process into two stages: (1) pre-training
a generalized source model and (2) adapting a target model with self-supervised
learning. In our framework, we propose the Cross-Patch Style Swap (CPSS) to
diversify samples with various patch styles in the feature-level, which can
benefit the training of both stages. First, CPSS can significantly improve the
generalization ability of the source model, providing more accurate
pseudo-labels for the latter stage. Second, CPSS can reduce the influence of
noisy pseudo-labels and also avoid the model overfitting to the target domain
during self-supervised learning, consistently boosting the performance on the
target and open domains. Experiments demonstrate that our method produces
state-of-the-art results on the C-Driving dataset. Furthermore, our model also
achieves the leading performance on CityScapes for domain generalization.
- Abstract(参考訳): 本研究では,オープンソースフリーオープン複合ドメイン適応(SF-OCDA)という新しい概念を導入し,セマンティックセグメンテーションで研究する。
sf-ocdaは従来のドメイン適応よりも難しいが、実用的だ。
1)データプライバシとデータストレージの問題,(2)複数のターゲットドメインと未認識のオープンドメインのシナリオを共同で検討する。
sf-ocdaでは、ターゲットモデルを学ぶために、ソース事前学習されたモデルとターゲットデータのみを利用できる。
モデルは、ターゲットドメインと未認識のオープンドメインのサンプルで評価される。
そこで本研究では,(1) 一般化ソースモデルの事前学習と(2) 目標モデルへの自己教師付き学習の適応という2つの段階に分け,効果的な枠組みを提案する。
本稿では,様々なパッチスタイルを特徴レベルで多様化するクロスパッチスタイルスワップ(cpss)を提案する。
まず、CPSSはソースモデルの一般化能力を大幅に向上させ、後者の段階でより正確な擬似ラベルを提供する。
第2に、cpsはノイズの多い擬似ラベルの影響を低減し、自己教師付き学習中にターゲットドメインに過度に適合するモデルを避けることで、ターゲットドメインとオープンドメインのパフォーマンスを一貫して向上させる。
実験により,本手法はC-Drivingデータセット上で最先端の結果を生成することを示した。
さらに,本モデルでは,CityScapesのドメイン一般化における主要な性能も達成している。
関連論文リスト
- PiPa++: Towards Unification of Domain Adaptive Semantic Segmentation via Self-supervised Learning [34.786268652516355]
教師なしドメイン適応セグメンテーションは、それらのドメインのラベル付きデータに頼ることなく、ターゲットドメイン上のモデルのセグメンテーション精度を向上させることを目的としている。
ソースドメイン(ラベル付きデータが利用可能な場所)とターゲットドメイン(ラベルなしデータのみが存在する場所)の特徴表現の整合を図る。
論文 参考訳(メタデータ) (2024-07-24T08:53:29Z) - High-order Neighborhoods Know More: HyperGraph Learning Meets Source-free Unsupervised Domain Adaptation [34.08681468394247]
Source-free Unsupervised Domain Adaptationは、未学習のソースモデルと未学習のターゲットモデルにのみアクセスすることで、ターゲットサンプルを分類することを目的としている。
既存の手法は、通常、対象サンプル間のペアワイズ関係を利用して、これらのサンプルを意味的特徴に基づいてクラスタリングすることで、それらの相関関係を見つけようとする。
本研究では、高次近傍関係を利用して、ドメインシフト効果を明示的に考慮した新しいSFDA法を提案する。
論文 参考訳(メタデータ) (2024-05-11T05:07:43Z) - Collaborative Multi-source Domain Adaptation Through Optimal Transport [0.0]
マルチソースドメイン適応(MDA)は、複数のラベル付きソースドメインのデータに基づいてトレーニングされたモデルを適用し、ラベルなしのターゲットドメインデータに対して効果的に実行する。
2つの重要なフェーズからなる新しいフレームワークであるCMDA-OT(Collaborative MDA Through Optimal Transport)を紹介する。
論文 参考訳(メタデータ) (2024-04-09T20:06:25Z) - SIDE: Self-supervised Intermediate Domain Exploration for Source-free
Domain Adaptation [36.470026809824674]
ドメイン適応は、ソースドメインからターゲットドメインに学習した知識を転送する際に、ドメインシフトを軽減することを目的としています。
プライバシの問題により、ソースフリードメイン適応(SFDA)は、最近非常に要求される一方で難しいものになっている。
本稿では、ドメインギャップを効果的に中間ドメインにブリッジする自己教師付き中間ドメイン探索(SIDE)を提案する。
論文 参考訳(メタデータ) (2023-10-13T07:50:37Z) - Open-Set Domain Adaptation with Visual-Language Foundation Models [51.49854335102149]
非教師なしドメイン適応(UDA)は、ソースドメインからラベルのないデータを持つターゲットドメインへの知識の転送に非常に効果的であることが証明されている。
オープンセットドメイン適応(ODA)は、トレーニングフェーズ中にこれらのクラスを識別する潜在的なソリューションとして登場した。
論文 参考訳(メタデータ) (2023-07-30T11:38:46Z) - IDA: Informed Domain Adaptive Semantic Segmentation [51.12107564372869]
クラスレベルのセグメンテーション性能に基づいてデータを混合する自己学習フレームワークであるDomain Informed Adaptation (IDA) モデルを提案する。
IDAモデルでは、クラスレベルの性能を期待信頼スコア(ECS)によって追跡し、動的スケジュールを用いて異なる領域のデータに対する混合比を決定する。
提案手法は,GTA-Vの都市景観への適応において1.1 mIoU,SynTHIAの都市への適応において0.9 mIoUのマージンで,最先端のUDA-SS法よりも優れる。
論文 参考訳(メタデータ) (2023-03-05T18:16:34Z) - Source-Free Domain Adaptation via Distribution Estimation [106.48277721860036]
ドメイン適応は、ラベル付きソースドメインから学んだ知識を、データ分散が異なるラベル付きターゲットドメインに転送することを目的としています。
近年,ソースフリードメイン適応 (Source-Free Domain Adaptation, SFDA) が注目されている。
本研究では,SFDA-DEと呼ばれる新しいフレームワークを提案し,ソース分布推定によるSFDAタスクに対処する。
論文 参考訳(メタデータ) (2022-04-24T12:22:19Z) - Unified Instance and Knowledge Alignment Pretraining for Aspect-based
Sentiment Analysis [96.53859361560505]
Aspect-based Sentiment Analysis (ABSA) は、ある側面に対する感情の極性を決定することを目的としている。
事前トレーニングと下流ABSAデータセットの間には、常に深刻なドメインシフトが存在する。
我々は,バニラ・プレトレイン・ファインチューンパイプラインにアライメント事前訓練フレームワークを導入する。
論文 参考訳(メタデータ) (2021-10-26T04:03:45Z) - Unsupervised Domain Adaptation with Multiple Domain Discriminators and
Adaptive Self-Training [22.366638308792734]
Unsupervised Domain Adaptation (UDA)は、ソースドメインでトレーニングされたモデルの一般化能力を改善し、ラベル付きデータが使用できないターゲットドメインでうまく機能することを目的としている。
本稿では、合成データに基づいて訓練されたディープニューラルネットワークを、2つの異なるデータ分布間のドメインシフトに対処する実シーンに適用するアプローチを提案する。
論文 参考訳(メタデータ) (2020-04-27T11:48:03Z) - Alleviating Semantic-level Shift: A Semi-supervised Domain Adaptation
Method for Semantic Segmentation [97.8552697905657]
このタスクの重要な課題は、ソースとターゲットドメイン間のデータ分散の相違を緩和する方法である。
本稿では,グローバルな視点とローカルな視点の両方から分布の整合性を促進できるASS(Alleviating Semantic-level Shift)を提案する。
GTA5、Cityscapes、Synthia、Cityscapesの2つのドメイン適応タスクにASSを適用します。
論文 参考訳(メタデータ) (2020-04-02T03:25:05Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。