論文の概要: Unsupervised Domain Adaptation via Structurally Regularized Deep
Clustering
- arxiv url: http://arxiv.org/abs/2003.08607v1
- Date: Thu, 19 Mar 2020 07:26:41 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-22 04:24:50.782211
- Title: Unsupervised Domain Adaptation via Structurally Regularized Deep
Clustering
- Title(参考訳): 構造規則化深層クラスタリングによる教師なしドメイン適応
- Authors: Hui Tang, Ke Chen, and Kui Jia
- Abstract要約: 教師なし領域適応(Unsupervised domain adapt, UDA)とは、対象ドメイン上のラベルなしデータの予測であり、対象ドメインから分布がシフトするソースドメイン上のラベル付きデータである。
対象データの識別クラスタリングにより,本質的な対象識別を直接発見することを提案する。
我々は,提案手法をSRDC (Structurely Regularized Deep Clustering) と呼ぶ。
- 参考スコア(独自算出の注目度): 35.008158504090176
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Unsupervised domain adaptation (UDA) is to make predictions for unlabeled
data on a target domain, given labeled data on a source domain whose
distribution shifts from the target one. Mainstream UDA methods learn aligned
features between the two domains, such that a classifier trained on the source
features can be readily applied to the target ones. However, such a
transferring strategy has a potential risk of damaging the intrinsic
discrimination of target data. To alleviate this risk, we are motivated by the
assumption of structural domain similarity, and propose to directly uncover the
intrinsic target discrimination via discriminative clustering of target data.
We constrain the clustering solutions using structural source regularization
that hinges on our assumed structural domain similarity. Technically, we use a
flexible framework of deep network based discriminative clustering that
minimizes the KL divergence between predictive label distribution of the
network and an introduced auxiliary one; replacing the auxiliary distribution
with that formed by ground-truth labels of source data implements the
structural source regularization via a simple strategy of joint network
training. We term our proposed method as Structurally Regularized Deep
Clustering (SRDC), where we also enhance target discrimination with clustering
of intermediate network features, and enhance structural regularization with
soft selection of less divergent source examples. Careful ablation studies show
the efficacy of our proposed SRDC. Notably, with no explicit domain alignment,
SRDC outperforms all existing methods on three UDA benchmarks.
- Abstract(参考訳): 教師なし領域適応(Unsupervised domain adapt, UDA)とは、対象ドメイン上のラベルなしデータの予測であり、対象ドメインから分布がシフトするソースドメイン上のラベル付きデータである。
メインストリームのUDAメソッドは、2つのドメイン間の整列した特徴を学習し、ソースの特徴に基づいて訓練された分類器を対象のドメインに容易に適用できるようにする。
しかし,このような移動戦略は,対象データの固有識別を損なう可能性がある。
このリスクを緩和するため,我々は構造的ドメイン類似性の仮定に動機づけられ,ターゲットデータの識別クラスタリングを通じて,本質的ターゲット識別を直接解明することを提案する。
我々は、仮定された構造領域の類似性に依存する構造的ソース正規化を用いてクラスタリングソリューションを制約する。
技術的には、ネットワークの予測ラベル分布と導入した補助データとのKL分散を最小限に抑える、深層ネットワークに基づく識別クラスタリングの柔軟なフレームワークを使用し、ソースデータの基幹ラベルによる補助分布に置き換えることで、結合ネットワークトレーニングの簡単な戦略による構造的ソース正規化を実現する。
提案手法をSRDC(Structuorly Regularized Deep Clustering)と呼び,中間的ネットワーク特徴のクラスタリングによるターゲット識別を強化し,より分散しないソース例のソフト選択による構造正規化を強化した。
著明なアブレーション研究は,提案したSRDCの有効性を示した。
特に、明示的なドメインアライメントがないSRDCは、既存のメソッドを3つのUDAベンチマークで上回っている。
関連論文リスト
- Adaptive Betweenness Clustering for Semi-Supervised Domain Adaptation [108.40945109477886]
分類領域アライメントを実現するために,G-ABC (Adaptive Betweenness Clustering) と呼ばれる新しいSSDA手法を提案する。
提案手法は従来のSSDA手法よりも優れており,提案したG-ABCアルゴリズムの優位性を示している。
論文 参考訳(メタデータ) (2024-01-21T09:57:56Z) - Unsupervised Domain Adaptation via Distilled Discriminative Clustering [45.39542287480395]
対象データの識別クラスタリングとしてドメイン適応問題を再検討する。
本稿では,ラベル付き情報源データよりも並列に教師付き学習目標を用いて,ネットワークを協調的に訓練することを提案する。
5つの人気のあるベンチマークデータセットに対して、慎重にアブレーション研究と広範な実験を行う。
論文 参考訳(メタデータ) (2023-02-23T13:03:48Z) - Divide and Contrast: Source-free Domain Adaptation via Adaptive
Contrastive Learning [122.62311703151215]
Divide and Contrast (DaC) は、それぞれの制限を回避しつつ、両方の世界の善良な端を接続することを目的としている。
DaCは、ターゲットデータをソースライクなサンプルとターゲット固有なサンプルに分割する。
さらに、ソースライクなドメインと、メモリバンクベースの最大平均離散性(MMD)損失を用いて、ターゲット固有のサンプルとを整合させて、分散ミスマッチを低減する。
論文 参考訳(メタデータ) (2022-11-12T09:21:49Z) - Polycentric Clustering and Structural Regularization for Source-free
Unsupervised Domain Adaptation [20.952542421577487]
Source-Free Domain Adaptation (SFDA)は、訓練済みのソースモデルから学習した知識を未確認のターゲットドメインに転送することで、ドメイン適応問題を解決することを目的としている。
既存のほとんどのメソッドは、機能プロトタイプを生成することによって、ターゲットデータに擬似ラベルを割り当てる。
本稿では,PCSRと命名された新しいフレームワークを,クラス内多中心クラスタリングおよび構造規則化戦略を通じてSFDAに取り組むために提案する。
論文 参考訳(メタデータ) (2022-10-14T02:20:48Z) - Semi-supervised Domain Adaptive Structure Learning [72.01544419893628]
半教師付きドメイン適応 (SSDA) は,1) アノテーションの低いデータに過度に適合する手法と,2) ドメイン間の分散シフトの両方を克服しなければならない課題である。
SSLとDAの協調を正規化するための適応型構造学習手法を提案する。
論文 参考訳(メタデータ) (2021-12-12T06:11:16Z) - Instance Level Affinity-Based Transfer for Unsupervised Domain
Adaptation [74.71931918541748]
ILA-DAと呼ばれる適応中のソースからターゲットへの転送に対するインスタンス親和性に基づく基準を提案する。
まず、ソースとターゲットをまたいだ類似および異種サンプルを抽出し、マルチサンプルのコントラスト損失を利用してドメインアライメントプロセスを駆動する信頼性が高く効率的な手法を提案する。
ILA-DAの有効性は、様々なベンチマークデータセットに対する一般的なドメイン適応手法よりも精度が一貫した改善を観察することによって検証する。
論文 参考訳(メタデータ) (2021-04-03T01:33:14Z) - Towards Uncovering the Intrinsic Data Structures for Unsupervised Domain
Adaptation using Structurally Regularized Deep Clustering [119.88565565454378]
Unsupervised Domain Adapt (UDA) は、ターゲットドメイン上のラベルなしデータの予測を行う分類モデルを学ぶことである。
本稿では,対象データの正規化判別クラスタリングと生成クラスタリングを統合する構造的正規化深層クラスタリングのハイブリッドモデルを提案する。
提案するH-SRDCは, インダクティブ設定とトランスダクティブ設定の両方において, 既存の手法よりも優れている。
論文 参考訳(メタデータ) (2020-12-08T08:52:00Z) - Discriminative Cross-Domain Feature Learning for Partial Domain
Adaptation [70.45936509510528]
部分的なドメイン適応は、より大きく多様なソースドメインからの知識を、より少ないクラス数でより小さなターゲットドメインに適応させることを目的としています。
ドメイン適応の最近の実践は、ターゲットドメインの擬似ラベルを組み込むことで、効果的な特徴を抽出する。
ターゲットデータを少数のソースデータのみにアライメントすることが不可欠である。
論文 参考訳(メタデータ) (2020-08-26T03:18:53Z) - Domain Adaptation by Class Centroid Matching and Local Manifold
Self-Learning [8.316259570013813]
本稿では,対象領域のデータ分散構造を徹底的に探索できる新しい領域適応手法を提案する。
対象領域内の同一クラスタ内のサンプルを個人ではなく全体とみなし、クラスセントロイドマッチングにより擬似ラベルを対象クラスタに割り当てる。
提案手法の目的関数を理論的収束保証を用いて解くために,効率的な反復最適化アルゴリズムを設計した。
論文 参考訳(メタデータ) (2020-03-20T16:59:27Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。