論文の概要: Finding Competence Regions in Domain Generalization
- arxiv url: http://arxiv.org/abs/2303.09989v1
- Date: Fri, 17 Mar 2023 14:04:51 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-20 14:26:39.507550
- Title: Finding Competence Regions in Domain Generalization
- Title(参考訳): 領域一般化における能力領域の探索
- Authors: Jens M\"uller, Stefan T. Radev, Robert Schmier, Felix Draxler, Carsten
Rother, Ullrich K\"othe
- Abstract要約: 本稿では、ドメイン一般化におけるサイレント障害問題に対処する「拒否学習」フレームワークを提案する。
信頼度はプロキシの非能率スコアによって予測され、それは分類器のパフォーマンスと密接に関連している。
その結果,非能率の上昇は精度の低下を予測し,適度な非能率閾値以下の平均精度を著しく向上させることがわかった。
- 参考スコア(独自算出の注目度): 22.893744961629018
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: We propose a "learning to reject" framework to address the problem of silent
failures in Domain Generalization (DG), where the test distribution differs
from the training distribution. Assuming a mild distribution shift, we wish to
accept out-of-distribution (OOD) data whenever a model's estimated competence
foresees trustworthy responses, instead of rejecting OOD data outright.
Trustworthiness is then predicted via a proxy incompetence score that is
tightly linked to the performance of a classifier. We present a comprehensive
experimental evaluation of incompetence scores for classification and highlight
the resulting trade-offs between rejection rate and accuracy gain. For
comparability with prior work, we focus on standard DG benchmarks and consider
the effect of measuring incompetence via different learned representations in a
closed versus an open world setting. Our results suggest that increasing
incompetence scores are indeed predictive of reduced accuracy, leading to
significant improvements of the average accuracy below a suitable incompetence
threshold. However, the scores are not yet good enough to allow for a favorable
accuracy/rejection trade-off in all tested domains. Surprisingly, our results
also indicate that classifiers optimized for DG robustness do not outperform a
naive Empirical Risk Minimization (ERM) baseline in the competence region, that
is, where test samples elicit low incompetence scores.
- Abstract(参考訳): 本稿では,テスト分布がトレーニング分布と異なるドメイン一般化(DG)において,サイレント障害に対処する"学習を拒否する"フレームワークを提案する。
軽微な分布シフトを仮定すると、OODデータを完全に拒否するのではなく、モデルが推定する能力が信頼できる応答を予測するたびに、アウト・オブ・ディストリビューション(OOD)データを受け入れたい。
信頼度はプロキシ非能率スコアによって予測され、分類器のパフォーマンスと密接に関連している。
分類のための非能率スコアの総合的な実験評価を行い、拒絶率と精度向上のトレードオフを明らかにする。
先行研究と組み合わせるために,標準dgベンチマークに着目し,クローズド対オープンワールドにおける異なる学習表現による非能率の測定の効果を検討する。
以上の結果から,不適格スコアの増加は精度の低下を予測し,適格不適格閾値以下では平均精度が有意に向上することが示唆された。
しかし、テスト対象のすべてのドメインで良好な精度/リジェクションのトレードオフを可能にするのに、スコアはまだ十分ではない。
また,DGロバスト性に最適化された分類器は,試験試料が低能力スコアを付与する能力領域において,単純な経験的リスク最小化(ERM)ベースラインを上回りません。
関連論文リスト
- Towards Robust and Interpretable EMG-based Hand Gesture Recognition using Deep Metric Meta Learning [37.21211404608413]
本稿では,意味的かつ解釈可能な表現の作成を監督するために,EMG PRにおける深層メートル法メタラーニングへのシフトを提案する。
我々は、不正確な決定をよりよく拒否する頑健なクラス近接性に基づく信頼度推定器を導出する。
論文 参考訳(メタデータ) (2024-04-17T23:37:50Z) - Revisiting Confidence Estimation: Towards Reliable Failure Prediction [53.79160907725975]
多くの信頼度推定法は誤分類誤りを検出するのに有害である。
本稿では, 最先端の故障予測性能を示す平坦な最小値を求めることにより, 信頼性ギャップを拡大することを提案する。
論文 参考訳(メタデータ) (2024-03-05T11:44:14Z) - Bi-discriminator Domain Adversarial Neural Networks with Class-Level
Gradient Alignment [87.8301166955305]
そこで本研究では,クラスレベルのアライメントアライメントを有するバイディミネータドメイン対向ニューラルネットワークを提案する。
BACGは、領域分布の整合性を改善するために勾配信号と二階確率推定を利用する。
さらに、対照的な学習にインスパイアされ、トレーニングプロセスを大幅に短縮できるメモリバンクベースの変種であるFast-BACGを開発した。
論文 参考訳(メタデータ) (2023-10-21T09:53:17Z) - Augmentation by Counterfactual Explanation -- Fixing an Overconfident
Classifier [11.233334009240947]
極めて正確だが過信的なモデルは、ヘルスケアや自動運転といった重要なアプリケーションへのデプロイには不適である。
本稿では,過度に信頼された分類器の修正に反事実的説明を適用することを提案する。
論文 参考訳(メタデータ) (2022-10-21T18:53:16Z) - Source-free Unsupervised Domain Adaptation for Blind Image Quality
Assessment [20.28784839680503]
既存の学習ベースのブラインド画像品質評価法(BIQA)は、大量の注釈付きトレーニングデータに大きく依存している。
本稿では,ソースフリーな非教師付きドメイン適応(SFUDA)への第一歩を,シンプルで効率的な方法で進める。
本稿では、BNアフィンパラメータのターゲット領域への適応を導くための、十分に設計された自己教師対象のグループを示す。
論文 参考訳(メタデータ) (2022-07-17T09:42:36Z) - Learning Unbiased Transferability for Domain Adaptation by Uncertainty
Modeling [107.24387363079629]
ドメイン適応は、ラベル付けされたソースドメインからラベル付けされていない、あるいはラベル付けされていないが関連するターゲットドメインに知識を転送することを目的としています。
ソース内のアノテートされたデータの量とターゲットドメインとの間の不均衡のため、ターゲットの分布のみがソースドメインにアライメントされる。
本稿では,非暴力的非暴力的移動可能性推定プラグイン(UTEP)を提案し,非暴力的移動を最適化するDA法において,識別器の不確実性をモデル化する。
論文 参考訳(メタデータ) (2022-06-02T21:58:54Z) - Leveraging Unlabeled Data to Predict Out-of-Distribution Performance [63.740181251997306]
実世界の機械学習デプロイメントは、ソース(トレーニング)とターゲット(テスト)ディストリビューションのミスマッチによって特徴づけられる。
本研究では,ラベル付きソースデータとラベルなしターゲットデータのみを用いて,対象領域の精度を予測する手法を検討する。
本稿では,モデルの信頼度をしきい値として学習し,精度をラベルなし例のごく一部として予測する実践的手法である平均閾値保持信頼度(ATC)を提案する。
論文 参考訳(メタデータ) (2022-01-11T23:01:12Z) - Boosting Unsupervised Domain Adaptation with Soft Pseudo-label and
Curriculum Learning [19.903568227077763]
教師なしドメイン適応(UDA)は、完全にラベル付けされたソースドメインからのデータを活用することにより、ラベル付けされていないターゲットドメインの分類性能を向上させる。
ソフトな擬似ラベル戦略を用いてモデル予測の欠陥を大幅に低減するモデルに依存しない2段階学習フレームワークを提案する。
第2段階では,2つのドメインの損失間の重み付けを適応的に制御するカリキュラム学習戦略を提案する。
論文 参考訳(メタデータ) (2021-12-03T14:47:32Z) - Identifying Incorrect Classifications with Balanced Uncertainty [21.130311978327196]
不確実性推定は、コストに敏感なディープラーニングアプリケーションには不可欠である。
本研究では,不確実性推定における不均衡を2種類の分布バイアスとしてモデル化するための分布不均衡を提案する。
そこで我々は,新たな分布的焦点損失目標を持つ不確実性推定器を学習する,バランスト・トゥルー・クラス確率フレームワークを提案する。
論文 参考訳(メタデータ) (2021-10-15T11:52:31Z) - Learning Calibrated Uncertainties for Domain Shift: A Distributionally
Robust Learning Approach [150.8920602230832]
ドメインシフトの下で校正された不確実性を学習するためのフレームワークを提案する。
特に、密度比推定は、ターゲット(テスト)サンプルの近さをソース(トレーニング)分布に反映する。
提案手法は下流タスクに有利な校正不確実性を生成する。
論文 参考訳(メタデータ) (2020-10-08T02:10:54Z) - Unlabelled Data Improves Bayesian Uncertainty Calibration under
Covariate Shift [100.52588638477862]
後続正則化に基づく近似ベイズ推定法を開発した。
前立腺癌の予後モデルを世界規模で導入する上で,本手法の有用性を実証する。
論文 参考訳(メタデータ) (2020-06-26T13:50:19Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。