論文の概要: Alleviating Semantic-level Shift: A Semi-supervised Domain Adaptation
Method for Semantic Segmentation
- arxiv url: http://arxiv.org/abs/2004.00794v2
- Date: Tue, 9 Jun 2020 22:38:27 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-17 09:46:33.764701
- Title: Alleviating Semantic-level Shift: A Semi-supervised Domain Adaptation
Method for Semantic Segmentation
- Title(参考訳): セマンティクスレベルシフトの緩和:セマンティクスセグメンテーションのための半教師あり領域適応法
- Authors: Zhonghao Wang, Yunchao Wei, Rogerior Feris, Jinjun Xiong, Wen-Mei Hwu,
Thomas S. Huang, Humphrey Shi
- Abstract要約: このタスクの重要な課題は、ソースとターゲットドメイン間のデータ分散の相違を緩和する方法である。
本稿では,グローバルな視点とローカルな視点の両方から分布の整合性を促進できるASS(Alleviating Semantic-level Shift)を提案する。
GTA5、Cityscapes、Synthia、Cityscapesの2つのドメイン適応タスクにASSを適用します。
- 参考スコア(独自算出の注目度): 97.8552697905657
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Learning segmentation from synthetic data and adapting to real data can
significantly relieve human efforts in labelling pixel-level masks. A key
challenge of this task is how to alleviate the data distribution discrepancy
between the source and target domains, i.e. reducing domain shift. The common
approach to this problem is to minimize the discrepancy between feature
distributions from different domains through adversarial training. However,
directly aligning the feature distribution globally cannot guarantee
consistency from a local view (i.e. semantic-level), which prevents certain
semantic knowledge learned on the source domain from being applied to the
target domain. To tackle this issue, we propose a semi-supervised approach
named Alleviating Semantic-level Shift (ASS), which can successfully promote
the distribution consistency from both global and local views. Specifically,
leveraging a small number of labeled data from the target domain, we directly
extract semantic-level feature representations from both the source and the
target domains by averaging the features corresponding to same categories
advised by pixel-level masks. We then feed the produced features to the
discriminator to conduct semantic-level adversarial learning, which
collaborates with the adversarial learning from the global view to better
alleviate the domain shift. We apply our ASS to two domain adaptation tasks,
from GTA5 to Cityscapes and from Synthia to Cityscapes. Extensive experiments
demonstrate that: (1) ASS can significantly outperform the current unsupervised
state-of-the-arts by employing a small number of annotated samples from the
target domain; (2) ASS can beat the oracle model trained on the whole target
dataset by over 3 points by augmenting the synthetic source data with annotated
samples from the target domain without suffering from the prevalent problem of
overfitting to the source domain.
- Abstract(参考訳): 合成データからのセグメンテーションの学習と実際のデータへの適応は、ピクセルレベルのマスクのラベル付けにおける人間の努力を著しく軽減する。
このタスクの重要な課題は、ソースとターゲットドメイン間のデータ分散の相違を緩和する方法、すなわちドメインシフトを減らすことである。
この問題に対する一般的なアプローチは、異なる領域からの特徴分布間の差を最小限に抑えることである。
しかし、グローバルに機能分布を整合させることは、ローカルビュー(セマンティックレベル)からの一貫性を保証できないため、ソースドメインで学習した特定のセマンティック知識がターゲットドメインに適用されない。
この問題に対処するために,グローバルな視点とローカルな視点の両方から分布の整合性を促進するための半教師付きアプローチであるAlleviating Semantic-level Shift (ASS)を提案する。
具体的には,対象領域から少数のラベル付きデータを活用することで,画素レベルのマスクが推奨する同じカテゴリに対応する特徴を平均化することにより,ソースとターゲット領域の両方から意味レベルの特徴表現を直接抽出する。
次に、作成した特徴を識別器に供給し、世界的視点からの敵対的学習と協調してドメインシフトを緩和する意味レベルの敵対的学習を行う。
GTA5、Cityscapes、Synthia、Cityscapesの2つのドメイン適応タスクにASSを適用します。
1) 対象ドメインからの注釈付きサンプルを少数使用することにより,現在管理されていない最先端の状態を著しく上回り,(2) ASSは,対象ドメインへのオーバーフィッティングの問題に悩まされることなく,対象ドメインからの注釈付きサンプルで合成ソースデータを増大させることで,ターゲットデータセット全体においてトレーニングされたオラクルモデルを3ポイント以上越えることができる。
関連論文リスト
- High-order Neighborhoods Know More: HyperGraph Learning Meets Source-free Unsupervised Domain Adaptation [34.08681468394247]
Source-free Unsupervised Domain Adaptationは、未学習のソースモデルと未学習のターゲットモデルにのみアクセスすることで、ターゲットサンプルを分類することを目的としている。
既存の手法は、通常、対象サンプル間のペアワイズ関係を利用して、これらのサンプルを意味的特徴に基づいてクラスタリングすることで、それらの相関関係を見つけようとする。
本研究では、高次近傍関係を利用して、ドメインシフト効果を明示的に考慮した新しいSFDA法を提案する。
論文 参考訳(メタデータ) (2024-05-11T05:07:43Z) - Divide and Contrast: Source-free Domain Adaptation via Adaptive
Contrastive Learning [122.62311703151215]
Divide and Contrast (DaC) は、それぞれの制限を回避しつつ、両方の世界の善良な端を接続することを目的としている。
DaCは、ターゲットデータをソースライクなサンプルとターゲット固有なサンプルに分割する。
さらに、ソースライクなドメインと、メモリバンクベースの最大平均離散性(MMD)損失を用いて、ターゲット固有のサンプルとを整合させて、分散ミスマッチを低減する。
論文 参考訳(メタデータ) (2022-11-12T09:21:49Z) - Low-confidence Samples Matter for Domain Adaptation [47.552605279925736]
ドメイン適応(DA)は、知識をラベルの豊富なソースドメインから関連するがラベルの少ないターゲットドメインに転送することを目的としている。
低信頼度サンプルの処理による新しいコントラスト学習法を提案する。
提案手法を教師なしと半教師付きの両方のDA設定で評価する。
論文 参考訳(メタデータ) (2022-02-06T15:45:45Z) - Semi-supervised Domain Adaptive Structure Learning [72.01544419893628]
半教師付きドメイン適応 (SSDA) は,1) アノテーションの低いデータに過度に適合する手法と,2) ドメイン間の分散シフトの両方を克服しなければならない課題である。
SSLとDAの協調を正規化するための適応型構造学習手法を提案する。
論文 参考訳(メタデータ) (2021-12-12T06:11:16Z) - Semi-supervised Domain Adaptation for Semantic Segmentation [3.946367634483361]
セマンティックセグメンテーションにおけるクロスドメインとイントラドメインのギャップに対処する2段階の半教師付き二重ドメイン適応(SSDDA)手法を提案する。
提案手法は,2つの共通合成-実合成セマンティックセグメンテーションベンチマークにおいて,最先端の手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2021-10-20T16:13:00Z) - Domain Adaptive Semantic Segmentation without Source Data [50.18389578589789]
モデルがソースドメイン上で事前学習されていることを前提として、ソースデータのないドメイン適応セマンティックセマンティックセマンティックセマンティクスについて検討する。
本稿では,この課題に対して,肯定的学習と否定的学習という2つの要素を用いた効果的な枠組みを提案する。
私たちのフレームワークは、パフォーマンスをさらに向上するために、他のメソッドに簡単に実装および組み込むことができます。
論文 参考訳(メタデータ) (2021-10-13T04:12:27Z) - Inferring Latent Domains for Unsupervised Deep Domain Adaptation [54.963823285456925]
Unsupervised Domain Adaptation (UDA)は、ラベル付きデータが利用できないターゲットドメインでモデルを学習する問題を指す。
本稿では,視覚データセット中の潜在ドメインを自動的に発見することにより,udaの問題に対処する新しい深層アーキテクチャを提案する。
提案手法を公開ベンチマークで評価し,最先端のドメイン適応手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2021-03-25T14:33:33Z) - Unsupervised Domain Adaptation with Multiple Domain Discriminators and
Adaptive Self-Training [22.366638308792734]
Unsupervised Domain Adaptation (UDA)は、ソースドメインでトレーニングされたモデルの一般化能力を改善し、ラベル付きデータが使用できないターゲットドメインでうまく機能することを目的としている。
本稿では、合成データに基づいて訓練されたディープニューラルネットワークを、2つの異なるデータ分布間のドメインシフトに対処する実シーンに適用するアプローチを提案する。
論文 参考訳(メタデータ) (2020-04-27T11:48:03Z) - Differential Treatment for Stuff and Things: A Simple Unsupervised
Domain Adaptation Method for Semantic Segmentation [105.96860932833759]
最先端のアプローチは、セマンティックレベルのアライメントの実行がドメインシフトの問題に取り組むのに役立つことを証明している。
我々は,物事領域や物事に対する異なる戦略による意味レベルのアライメントを改善することを提案する。
提案手法に加えて,提案手法は,ソースとターゲットドメイン間の最も類似した機能やインスタンス機能を最小化することにより,この問題の緩和に有効であることを示す。
論文 参考訳(メタデータ) (2020-03-18T04:43:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。