論文の概要: Domain Adaptation with Conditional Distribution Matching and Generalized
Label Shift
- arxiv url: http://arxiv.org/abs/2003.04475v3
- Date: Fri, 11 Dec 2020 21:59:58 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-24 20:17:04.670899
- Title: Domain Adaptation with Conditional Distribution Matching and Generalized
Label Shift
- Title(参考訳): 条件分布マッチングと一般化ラベルシフトによる領域適応
- Authors: Remi Tachet, Han Zhao, Yu-Xiang Wang and Geoff Gordon
- Abstract要約: 相互学習は教師なし領域適応設定において優れた性能を示した。
本稿では,ラベル分布の不一致に対するロバスト性を改善するために,新たな仮定である一般化ラベルシフト(GLS$)を提案する。
我々のアルゴリズムは、大きなラベルの分布ミスマッチに対して大幅に改善され、ベースバージョンよりも優れています。
- 参考スコア(独自算出の注目度): 20.533804144992207
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Adversarial learning has demonstrated good performance in the unsupervised
domain adaptation setting, by learning domain-invariant representations.
However, recent work has shown limitations of this approach when label
distributions differ between the source and target domains. In this paper, we
propose a new assumption, generalized label shift ($GLS$), to improve
robustness against mismatched label distributions. $GLS$ states that,
conditioned on the label, there exists a representation of the input that is
invariant between the source and target domains. Under $GLS$, we provide
theoretical guarantees on the transfer performance of any classifier. We also
devise necessary and sufficient conditions for $GLS$ to hold, by using an
estimation of the relative class weights between domains and an appropriate
reweighting of samples. Our weight estimation method could be straightforwardly
and generically applied in existing domain adaptation (DA) algorithms that
learn domain-invariant representations, with small computational overhead. In
particular, we modify three DA algorithms, JAN, DANN and CDAN, and evaluate
their performance on standard and artificial DA tasks. Our algorithms
outperform the base versions, with vast improvements for large label
distribution mismatches. Our code is available at https://tinyurl.com/y585xt6j.
- Abstract(参考訳): 逆学習は、教師なし領域適応設定において、ドメイン不変表現を学習することによって、優れた性能を示した。
しかし、最近の研究では、ソースとターゲットドメインのラベル分布が異なる場合、このアプローチの制限が示されている。
本稿では,不整合ラベル分布に対するロバスト性を改善するために,一般化ラベルシフト(gls$)を提案する。
$gls$ は、ラベル上で条件付けされ、ソースドメインとターゲットドメインの間に不変な入力の表現が存在することを述べる。
GLS$で、任意の分類器の転送性能に関する理論的保証を提供する。
また、ドメイン間の相対クラス重みの推定とサンプルの適切な再重み付けを用いて、gls$を保持するための必要十分条件を考案する。
提案手法は,計算オーバーヘッドが小さく,ドメイン不変表現を学習する既存のドメイン適応(da)アルゴリズムにおいて,直接的かつ汎用的に重み付けを行うことができる。
特に,JAN,DANN,CDANの3つのDAアルゴリズムを修正し,その性能を標準および人工DAタスクで評価する。
当社のアルゴリズムはベースバージョンを上回っており、大きなラベルの分布ミスマッチを大幅に改善しています。
私たちのコードはhttps://tinyurl.com/y585xt6jで利用可能です。
関連論文リスト
- Domain Adaptation under Open Set Label Shift [39.424134505152544]
オープンセットラベルシフト(OSLS)におけるドメイン適応問題について紹介する。
OSLSはラベルシフトとポジティブアンラベル(PU)学習の下でドメイン適応を仮定する。
ブラックボックス予測器を利用する両方のタスクに対して,実用的な手法を提案する。
論文 参考訳(メタデータ) (2022-07-26T17:09:48Z) - Cycle Label-Consistent Networks for Unsupervised Domain Adaptation [57.29464116557734]
ドメイン適応は、ラベル付きソースドメインを活用して、異なる分布を持つラベル付きターゲットドメインの分類子を学ぶことを目的としています。
本稿では,分類ラベルのサイクル整合性を利用して,シンプルで効率的な領域適応手法,すなわちCycle Label-Consistent Network (CLCN)を提案する。
MNIST-USPS-SVHN, Office-31, Office-Home, Image CLEF-DAベンチマークに対するアプローチの有効性を示す。
論文 参考訳(メタデータ) (2022-05-27T13:09:08Z) - Source-Free Domain Adaptation via Distribution Estimation [106.48277721860036]
ドメイン適応は、ラベル付きソースドメインから学んだ知識を、データ分散が異なるラベル付きターゲットドメインに転送することを目的としています。
近年,ソースフリードメイン適応 (Source-Free Domain Adaptation, SFDA) が注目されている。
本研究では,SFDA-DEと呼ばれる新しいフレームワークを提案し,ソース分布推定によるSFDAタスクに対処する。
論文 参考訳(メタデータ) (2022-04-24T12:22:19Z) - Domain Generalization under Conditional and Label Shifts via Variational
Bayesian Inference [15.891459629460796]
本稿では,複数のラベル付きソースドメインについて学習するドメイン一般化(DG)手法を提案する。
我々のフレームワークはラベルシフトに対して堅牢であり、ドメイン間の精度が大幅に向上していることを示す。
論文 参考訳(メタデータ) (2021-07-22T21:19:12Z) - Instance Level Affinity-Based Transfer for Unsupervised Domain
Adaptation [74.71931918541748]
ILA-DAと呼ばれる適応中のソースからターゲットへの転送に対するインスタンス親和性に基づく基準を提案する。
まず、ソースとターゲットをまたいだ類似および異種サンプルを抽出し、マルチサンプルのコントラスト損失を利用してドメインアライメントプロセスを駆動する信頼性が高く効率的な手法を提案する。
ILA-DAの有効性は、様々なベンチマークデータセットに対する一般的なドメイン適応手法よりも精度が一貫した改善を観察することによって検証する。
論文 参考訳(メタデータ) (2021-04-03T01:33:14Z) - Learning Target Domain Specific Classifier for Partial Domain Adaptation [85.71584004185031]
非教師付きドメイン適応(UDA)は、ラベル付きソースドメインからラベル付きターゲットドメインに知識を転送する際の分散不一致を低減することを目的としている。
本稿では,ターゲットラベル空間をソースラベル空間に仮定する,より現実的なUDAシナリオに焦点を当てる。
論文 参考訳(メタデータ) (2020-08-25T02:28:24Z) - Sparsely-Labeled Source Assisted Domain Adaptation [64.75698236688729]
本稿では,Sparsely-Labeled Source Assisted Domain Adaptation (SLSA-DA)アルゴリズムを提案する。
ラベル不足の問題により、ソースドメインとターゲットドメインの両方で投影されたクラスタリングが行われる。
論文 参考訳(メタデータ) (2020-05-08T15:37:35Z) - A Balanced and Uncertainty-aware Approach for Partial Domain Adaptation [142.31610972922067]
この研究は、特にターゲットドメインのクラスラベルがソースドメインのサブセットである場合に、教師なしのドメイン適応問題に対処する。
本稿では,ドメイン逆境学習に基づく新しいドメイン適応手法 BA$3$US を提案し,BAA(Ba balanced Adversarial Alignment)とAUS(Adaptive Uncertainty Suppression)の2つの新しい手法を提案する。
複数のベンチマーク実験の結果、BA$3$USが部分的なドメイン適応タスクの最先端を超越していることが示されている。
論文 参考訳(メタデータ) (2020-03-05T11:37:06Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。