論文の概要: Domain Conditional Predictors for Domain Adaptation
- arxiv url: http://arxiv.org/abs/2106.13899v1
- Date: Fri, 25 Jun 2021 22:15:54 GMT
- ステータス: 処理完了
- システム内更新日: 2021-06-29 14:07:19.733786
- Title: Domain Conditional Predictors for Domain Adaptation
- Title(参考訳): ドメイン適応のためのドメイン条件予測器
- Authors: Joao Monteiro, Xavier Gibert, Jianqiao Feng, Vincent Dumoulin,
Dar-Shyang Lee
- Abstract要約: 本稿では,入力データに依存することに加えて,基礎となるデータ生成分布に対する情報を利用する条件付きモデリング手法を検討する。
このようなアプローチは、現在のドメイン適応手法よりも一般的に適用可能であると論じる。
- 参考スコア(独自算出の注目度): 3.951376400628575
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Learning guarantees often rely on assumptions of i.i.d. data, which will
likely be violated in practice once predictors are deployed to perform
real-world tasks. Domain adaptation approaches thus appeared as a useful
framework yielding extra flexibility in that distinct train and test data
distributions are supported, provided that other assumptions are satisfied such
as covariate shift, which expects the conditional distributions over labels to
be independent of the underlying data distribution. Several approaches were
introduced in order to induce generalization across varying train and test data
sources, and those often rely on the general idea of domain-invariance, in such
a way that the data-generating distributions are to be disregarded by the
prediction model. In this contribution, we tackle the problem of generalizing
across data sources by approaching it from the opposite direction: we consider
a conditional modeling approach in which predictions, in addition to being
dependent on the input data, use information relative to the underlying
data-generating distribution. For instance, the model has an explicit mechanism
to adapt to changing environments and/or new data sources. We argue that such
an approach is more generally applicable than current domain adaptation methods
since it does not require extra assumptions such as covariate shift and further
yields simpler training algorithms that avoid a common source of training
instabilities caused by minimax formulations, often employed in
domain-invariant methods.
- Abstract(参考訳): 学習保証は、しばしばi.i.d.の仮定に依存する
予測器が実際のタスクを実行するためにデプロイされると、実際に違反する可能性があるデータ。
このようにドメイン適応アプローチは、ラベル上の条件分布が基礎となるデータ分布から独立することを期待する共変量シフトなど、他の仮定が満たされるならば、異なるトレインとテストデータ分布をサポートするという、余分な柔軟性をもたらす有用なフレームワークとして現れた。
様々な列車やテストデータソースをまたいだ一般化を誘導するために,データ生成分布が予測モデルに無視されるように,ドメイン不変性の一般的な考え方に依存する方法がいくつか導入された。
本研究では,入力データに依存することに加えて,基礎となるデータ生成分布に関する情報を利用する条件付きモデリング手法を検討する。
例えば、モデルには環境の変化や新しいデータソースに適応するための明確なメカニズムがあります。
このようなアプローチは、共変量シフトのような余分な仮定を必要とせず、最小限の定式化によって生じるトレーニング不安定性の共通源を避けるため、より単純なトレーニングアルゴリズムが得られるため、現在の領域適応法よりも一般的に適用可能である。
関連論文リスト
- Causality-oriented robustness: exploiting general additive interventions [3.871660145364189]
本稿では因果性指向のロバスト性に着目し,不変勾配(DRIG)を用いた分布ロバスト性を提案する。
線形環境では、DRIGがデータ依存の分布シフトのクラスの中で頑健な予測を得られることを証明している。
我々は、予測性能をさらに向上させるために、半教師付きドメイン適応設定にアプローチを拡張した。
論文 参考訳(メタデータ) (2023-07-18T16:22:50Z) - Predicting Out-of-Domain Generalization with Neighborhood Invariance [59.05399533508682]
局所変換近傍における分類器の出力不変性の尺度を提案する。
私たちの測度は計算が簡単で、テストポイントの真のラベルに依存しません。
画像分類,感情分析,自然言語推論のベンチマーク実験において,我々の測定値と実際のOOD一般化との間に強い相関関係を示す。
論文 参考訳(メタデータ) (2022-07-05T14:55:16Z) - Source-Free Domain Adaptation via Distribution Estimation [106.48277721860036]
ドメイン適応は、ラベル付きソースドメインから学んだ知識を、データ分散が異なるラベル付きターゲットドメインに転送することを目的としています。
近年,ソースフリードメイン適応 (Source-Free Domain Adaptation, SFDA) が注目されている。
本研究では,SFDA-DEと呼ばれる新しいフレームワークを提案し,ソース分布推定によるSFDAタスクに対処する。
論文 参考訳(メタデータ) (2022-04-24T12:22:19Z) - Self-balanced Learning For Domain Generalization [64.99791119112503]
ドメインの一般化は、モデルが未知の統計を持つ対象のドメインに一般化できるように、マルチドメインのソースデータの予測モデルを学ぶことを目的としている。
既存のアプローチのほとんどは、ソースデータがドメインとクラスの両方の観点からバランスよく調整されているという前提の下で開発されている。
本稿では,多領域ソースデータの分布の違いによるバイアスを軽減するために,損失の重み付けを適応的に学習する自己均衡型領域一般化フレームワークを提案する。
論文 参考訳(メタデータ) (2021-08-31T03:17:54Z) - Adaptive Conformal Inference Under Distribution Shift [0.0]
本研究では,未知の方法でデータ生成分布を時間とともに変化させるオンライン環境において,予測セットを形成する手法を開発した。
我々のフレームワークは、任意のブラックボックスメソッドと組み合わせられる一般的なラッパーを提供するために、共形推論のアイデアに基づいている。
我々は,2つの実世界のデータセット上で適応型共形推論法を検証し,その予測が可視的および有意な分布シフトに対して堅牢であることを見出した。
論文 参考訳(メタデータ) (2021-06-01T01:37:32Z) - Learning Invariant Representations and Risks for Semi-supervised Domain
Adaptation [109.73983088432364]
半教師付きドメイン適応(Semi-DA)の設定の下で不変表現とリスクを同時に学習することを目的とした最初の手法を提案する。
共同で textbfLearning textbfInvariant textbfRepresentations と textbfRisks の LIRR アルゴリズムを導入する。
論文 参考訳(メタデータ) (2020-10-09T15:42:35Z) - Unlabelled Data Improves Bayesian Uncertainty Calibration under
Covariate Shift [100.52588638477862]
後続正則化に基づく近似ベイズ推定法を開発した。
前立腺癌の予後モデルを世界規模で導入する上で,本手法の有用性を実証する。
論文 参考訳(メタデータ) (2020-06-26T13:50:19Z) - On generalization in moment-based domain adaptation [1.8047694351309205]
ドメイン適応アルゴリズムは、訓練データが少ないターゲットドメインに対する識別モデルの誤分類リスクを最小限に抑えるように設計されている。
標準手法は、ソース領域とターゲット領域における経験的確率分布間の距離測定に基づいて適応誤差を測定する。
論文 参考訳(メタデータ) (2020-02-19T16:05:27Z) - Few-shot Domain Adaptation by Causal Mechanism Transfer [107.08605582020866]
我々は,少数のラベル付き対象ドメインデータと多数のラベル付きソースドメインデータしか利用できないレグレッション問題に対して,数ショットの教師付きドメイン適応(DA)について検討する。
現在のDA法の多くは、パラメータ化された分布シフトまたは明らかな分布類似性に基づく転送仮定に基づいている。
本稿では,データ生成機構がドメイン間で不変であるメタ分散シナリオであるメカニズム転送を提案する。
論文 参考訳(メタデータ) (2020-02-10T02:16:53Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。