論文の概要: Online Meta-Learning for Multi-Source and Semi-Supervised Domain
Adaptation
- arxiv url: http://arxiv.org/abs/2004.04398v2
- Date: Mon, 27 Jul 2020 12:55:37 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-15 02:19:34.366744
- Title: Online Meta-Learning for Multi-Source and Semi-Supervised Domain
Adaptation
- Title(参考訳): マルチソースおよびセミ教師付きドメイン適応のためのオンラインメタラーニング
- Authors: Da Li, Timothy Hospedales
- Abstract要約: 本稿では,既存のDAアルゴリズムの初期条件をメタラーニングすることで,性能向上のためのフレームワークを提案する。
マルチソース非教師付きドメイン適応(MSDA)と半教師付きドメイン適応(SSDA)の両方の変種を提示する。
最大規模のDomainNetを含む,いくつかのDAベンチマークで得られた成果を報告する。
- 参考スコア(独自算出の注目度): 4.1799778475823315
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Domain adaptation (DA) is the topical problem of adapting models from
labelled source datasets so that they perform well on target datasets where
only unlabelled or partially labelled data is available. Many methods have been
proposed to address this problem through different ways to minimise the domain
shift between source and target datasets. In this paper we take an orthogonal
perspective and propose a framework to further enhance performance by
meta-learning the initial conditions of existing DA algorithms. This is
challenging compared to the more widely considered setting of few-shot
meta-learning, due to the length of the computation graph involved. Therefore
we propose an online shortest-path meta-learning framework that is both
computationally tractable and practically effective for improving DA
performance. We present variants for both multi-source unsupervised domain
adaptation (MSDA), and semi-supervised domain adaptation (SSDA). Importantly,
our approach is agnostic to the base adaptation algorithm, and can be applied
to improve many techniques. Experimentally, we demonstrate improvements on
classic (DANN) and recent (MCD and MME) techniques for MSDA and SSDA, and
ultimately achieve state of the art results on several DA benchmarks including
the largest scale DomainNet.
- Abstract(参考訳): ドメイン適応(da)は、ラベル付きまたは部分的にラベル付きデータしか利用できないターゲットデータセットでうまく機能するようにラベル付きソースデータセットからモデルを適用するというトピック的問題である。
ソースとターゲットデータセット間のドメインシフトを最小限にするために、さまざまな方法でこの問題に対処する多くの方法が提案されている。
本稿では,既存のdaアルゴリズムの初期条件をメタ学習することにより,その性能をさらに高めるための枠組みを提案する。
これは、計算グラフの長さのため、数ショットのメタラーニングが広く検討されているのに比べ、難しい。
そこで本稿では,DAの性能向上に有効なオンライン最短パスメタ学習フレームワークを提案する。
本稿では,マルチソース非教師付きドメイン適応 (MSDA) と半教師付きドメイン適応 (SSDA) の2つの変種について述べる。
重要なことに,本手法はベース適応アルゴリズムに非依存であり,多くの手法を改良するために適用可能である。
実験により,MSDAおよびSSDAにおける古典的(DANN)および最近の(MCDおよびMME)技術の改善を実証し,最大規模のDomainNetを含むいくつかのDAベンチマークにおいて,最終的に技術結果の状態を達成した。
関連論文リスト
- More is Better: Deep Domain Adaptation with Multiple Sources [34.26271755493111]
マルチソースドメイン適応(MDA)は、ラベル付きデータを異なる分布を持つ複数のソースから収集できる、強力で実用的な拡張である。
本調査では,まず様々なMDA戦略を定義し,その後,異なる視点から,深層学習時代の現代MDA手法を体系的に要約し,比較する。
論文 参考訳(メタデータ) (2024-05-01T03:37:12Z) - PracticalDG: Perturbation Distillation on Vision-Language Models for Hybrid Domain Generalization [24.413415998529754]
本稿では,Hybrid Domain Generalization (HDG) と,アルゴリズムのロバスト性を評価するために,様々な分割を構成する新しい指標である$H2$-CVを提案する。
提案手法は,複数のデータセット上での最先端アルゴリズムよりも優れており,特にデータ不足に直面する場合のロバスト性の向上に寄与する。
論文 参考訳(メタデータ) (2024-04-13T13:41:13Z) - Subject-Based Domain Adaptation for Facial Expression Recognition [51.10374151948157]
ディープラーニングモデルを特定の対象個人に適用することは、難しい表情認識タスクである。
本稿では、FERにおける主観的ドメイン適応のための新しいMSDA手法を提案する。
複数の情報源からの情報を効率的に利用して、ディープFERモデルを単一のターゲット個人に適応させる。
論文 参考訳(メタデータ) (2023-12-09T18:40:37Z) - Open-Set Domain Adaptation with Visual-Language Foundation Models [51.49854335102149]
非教師なしドメイン適応(UDA)は、ソースドメインからラベルのないデータを持つターゲットドメインへの知識の転送に非常に効果的であることが証明されている。
オープンセットドメイン適応(ODA)は、トレーニングフェーズ中にこれらのクラスを識別する潜在的なソリューションとして登場した。
論文 参考訳(メタデータ) (2023-07-30T11:38:46Z) - Improving Transferability of Domain Adaptation Networks Through Domain
Alignment Layers [1.3766148734487902]
マルチソースアン教師付きドメイン適応(MSDA)は、ソースモデルの袋から弱い知識を割り当てることで、ラベルのないドメインの予測子を学習することを目的としている。
我々は,DomaIn Alignment Layers (MS-DIAL) のマルチソースバージョンを予測器の異なるレベルに埋め込むことを提案する。
我々の手法は最先端のMSDA法を改善することができ、分類精度の相対利得は+30.64%に達する。
論文 参考訳(メタデータ) (2021-09-06T18:41:19Z) - A Review of Single-Source Deep Unsupervised Visual Domain Adaptation [81.07994783143533]
大規模ラベル付きトレーニングデータセットにより、ディープニューラルネットワークは、幅広いベンチマークビジョンタスクを拡張できるようになった。
多くのアプリケーションにおいて、大量のラベル付きデータを取得するのは非常に高価で時間を要する。
限られたラベル付きトレーニングデータに対処するため、大規模ラベル付きソースドメインでトレーニングされたモデルを、疎ラベルまたは未ラベルのターゲットドメインに直接適用しようと試みている人も多い。
論文 参考訳(メタデータ) (2020-09-01T00:06:50Z) - Rethinking Distributional Matching Based Domain Adaptation [111.15106414932413]
ドメイン適応(DA)は、ラベル付きソースドメインでトレーニングされた予測モデルをラベル付きターゲットドメインに転送するテクニックである。
最も一般的なDAアルゴリズムは、分散マッチング(DM)に基づいている。
本稿では,まずDMに基づく手法の限界を体系的に分析し,さらに現実的なドメインシフトを持つ新しいベンチマークを構築する。
論文 参考訳(メタデータ) (2020-06-23T21:55:14Z) - Supervised Domain Adaptation using Graph Embedding [86.3361797111839]
領域適応法は、2つの領域間の分布がシフトし、それを認識しようとすると仮定する。
グラフ埋め込みに基づく汎用フレームワークを提案する。
提案手法が強力なドメイン適応フレームワークにつながることを示す。
論文 参考訳(メタデータ) (2020-03-09T12:25:13Z) - Multi-source Domain Adaptation in the Deep Learning Era: A Systematic
Survey [53.656086832255944]
マルチソースドメイン適応(MDA)は、ラベル付きデータを複数のソースから収集できる強力な拡張である。
MDAは学術と産業の両方で注目を集めている。
論文 参考訳(メタデータ) (2020-02-26T08:07:58Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。