論文の概要: ELSA: Efficient Label Shift Adaptation through the Lens of
Semiparametric Models
- arxiv url: http://arxiv.org/abs/2305.19123v1
- Date: Tue, 30 May 2023 15:31:44 GMT
- ステータス: 処理完了
- システム内更新日: 2023-05-31 15:36:00.772367
- Title: ELSA: Efficient Label Shift Adaptation through the Lens of
Semiparametric Models
- Title(参考訳): ELSA:半パラメトリックモデルのレンズによる効率的なラベルシフト適応
- Authors: Qinglong Tian, Xin Zhang, Jiwei Zhao
- Abstract要約: ラベルシフトのコンテキスト下では、ラベルの限界分布はトレーニングとテストデータセットによって異なる。
本稿では,影響関数の幾何学に基づくラベルシフト適応のためのモーメントマッチングフレームワークを提案する。
このような枠組みの下では、 underlineEfficient underlineLabel underlineShift underline Adaptation (ELSA) という新しい手法を提案する。
- 参考スコア(独自算出の注目度): 2.73424570009809
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We study the domain adaptation problem with label shift in this work. Under
the label shift context, the marginal distribution of the label varies across
the training and testing datasets, while the conditional distribution of
features given the label is the same. Traditional label shift adaptation
methods either suffer from large estimation errors or require cumbersome
post-prediction calibrations. To address these issues, we first propose a
moment-matching framework for adapting the label shift based on the geometry of
the influence function. Under such a framework, we propose a novel method named
\underline{E}fficient \underline{L}abel \underline{S}hift
\underline{A}daptation (ELSA), in which the adaptation weights can be estimated
by solving linear systems. Theoretically, the ELSA estimator is
$\sqrt{n}$-consistent ($n$ is the sample size of the source data) and
asymptotically normal. Empirically, we show that ELSA can achieve
state-of-the-art estimation performances without post-prediction calibrations,
thus, gaining computational efficiency.
- Abstract(参考訳): 本研究ではラベルシフトを伴う領域適応問題について検討する。
ラベルシフトのコンテキスト下では、ラベルの限界分布はトレーニングとテストデータセットによって異なり、ラベルが与えられた機能の条件分布は同じである。
従来のラベルシフト適応法は、大きな推定誤差に苦しむか、予測後キャリブレーションが必要となる。
これらの問題に対処するために,まず,インフルエンス関数の幾何学に基づくラベルシフト適応のためのモーメントマッチングフレームワークを提案する。
そのような枠組みの下で、線形系を解くことで適応重みを推定できる新しい手法である \underline{E}fficient \underline{L}abel \underline{S}hift \underline{A}daptation (ELSA) を提案する。
理論的には、ELSA推定子は$\sqrt{n}$-consistent ($n$ is the sample size of the source data)であり、漸近的に正規である。
実験により,ELSAは予測後のキャリブレーションを伴わずに最先端の予測性能を達成でき,計算効率が向上することを示した。
関連論文リスト
- Inaccurate Label Distribution Learning with Dependency Noise [52.08553913094809]
本稿では,依存雑音に基づく不正確なラベル分布学習(DN-ILDL)フレームワークを導入し,ラベル分布学習におけるノイズによる課題に対処する。
本稿では,DN-ILDLがILDL問題に効果的に対処し,既存のLCL法より優れていることを示す。
論文 参考訳(メタデータ) (2024-05-26T07:58:07Z) - Estimating calibration error under label shift without labels [47.57286245320775]
既存のCE推定器は、ターゲットドメインからのラベルへのアクセスを前提としており、実際には利用できないことが多い。
本研究は、ラベルシフト中の新しいCE推定器を提案し、ソースとターゲットの分布間の条件付き$p(X|Y)$定数を維持しながら、境界ラベル分布の$p(Y)$の変化を特徴とする。
我々の貢献は、ラベル付きソース分布の重要度再重み付けを活用することによって、シフトしたターゲット分布に対する一貫性と偏りのないCE推定を提供するアプローチである。
論文 参考訳(メタデータ) (2023-12-14T01:18:51Z) - Online Label Shift: Optimal Dynamic Regret meets Practical Algorithms [33.61487362513345]
本稿では、教師付きおよび教師なしのオンラインラベルシフトに焦点を当て、クラス境界の$Q(y)$は異なるが、クラス条件の$Q(x|y)$は不変である。
教師なしの環境では、オフラインラベル付きデータに基づいてトレーニングされた学習者を、ラベルなしのオンラインデータに対してラベル分布を変更するように適応させることが目的です。
我々は,オンライン回帰への適応問題を低減し,ラベル分布のドリフトの程度を事前に知ることなく,最適な動的後悔を保証する新しいアルゴリズムを開発した。
論文 参考訳(メタデータ) (2023-05-31T05:39:52Z) - Dist-PU: Positive-Unlabeled Learning from a Label Distribution
Perspective [89.5370481649529]
本稿では,PU学習のためのラベル分布視点を提案する。
そこで本研究では,予測型と基底型のラベル分布間のラベル分布の整合性を追求する。
提案手法の有効性を3つのベンチマークデータセットで検証した。
論文 参考訳(メタデータ) (2022-12-06T07:38:29Z) - Label distribution learning via label correlation grid [9.340734188957727]
ラベル関係の不確かさをモデル化するための textbfLabel textbfCorrelation textbfGrid (LCG) を提案する。
我々のネットワークはLCGを学習し、各インスタンスのラベル分布を正確に推定する。
論文 参考訳(メタデータ) (2022-10-15T03:58:15Z) - Domain Adaptation under Open Set Label Shift [39.424134505152544]
オープンセットラベルシフト(OSLS)におけるドメイン適応問題について紹介する。
OSLSはラベルシフトとポジティブアンラベル(PU)学習の下でドメイン適応を仮定する。
ブラックボックス予測器を利用する両方のタスクに対して,実用的な手法を提案する。
論文 参考訳(メタデータ) (2022-07-26T17:09:48Z) - Instance-Dependent Partial Label Learning [69.49681837908511]
部分ラベル学習は、典型的には弱教師付き学習問題である。
既存のほとんどのアプローチでは、トレーニングサンプルの間違ったラベルがランダムに候補ラベルとして選択されていると仮定している。
本稿では,各例が実数で構成された潜在ラベル分布と関連していると仮定する。
論文 参考訳(メタデータ) (2021-10-25T12:50:26Z) - Distribution-Aware Semantics-Oriented Pseudo-label for Imbalanced
Semi-Supervised Learning [80.05441565830726]
本稿では,疑似ラベルの重み付けがモデル性能に悪影響を及ぼすような,不均衡な半教師付き学習に対処する。
本稿では,この観測の動機となるバイアスに対処する,一般的な擬似ラベルフレームワークを提案する。
不均衡SSLのための新しい擬似ラベルフレームワークを、DASO(Distributed-Aware Semantics-Oriented Pseudo-label)と呼ぶ。
論文 参考訳(メタデータ) (2021-06-10T11:58:25Z) - Coping with Label Shift via Distributionally Robust Optimisation [72.80971421083937]
分散ロバスト最適化(DRO)に基づく目的最小化モデルを提案する。
そこで我々は,提案した目的を最適化するために,大規模問題に適した勾配降下近位ミラー上昇アルゴリズムを設計し,解析する。
論文 参考訳(メタデータ) (2020-10-23T08:33:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。