論文の概要: Data Invariants to Understand Unsupervised Out-of-Distribution Detection
- arxiv url: http://arxiv.org/abs/2111.13362v1
- Date: Fri, 26 Nov 2021 08:42:56 GMT
- ステータス: 処理完了
- システム内更新日: 2021-11-29 16:39:08.851691
- Title: Data Invariants to Understand Unsupervised Out-of-Distribution Detection
- Title(参考訳): 教師なし分布検出を理解するためのデータ不変量
- Authors: Lars Doorenbos, Raphael Sznitman, Pablo M\'arquez-Neila
- Abstract要約: U-OOD(unsupervised out-of-distribution)検出は、ミッションクリティカルシステムの重要性と、その教師付きシステムよりも幅広い適用性により、最近多くの注目を集めている。
この研究で、最も一般的な最先端の手法は、マハラノビス距離(MahaAD)に基づいて、単純で比較的未知の異常検出器を一貫して上回ることができないことを示す。
これらの手法の不整合の鍵となる理由は、U-OODの正式な記述がないことである。
- 参考スコア(独自算出の注目度): 3.2872586139884623
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Unsupervised out-of-distribution (U-OOD) detection has recently attracted
much attention due its importance in mission-critical systems and broader
applicability over its supervised counterpart. Despite this increase in
attention, U-OOD methods suffer from important shortcomings. By performing a
large-scale evaluation on different benchmarks and image modalities, we show in
this work that most popular state-of-the-art methods are unable to consistently
outperform a simple and relatively unknown anomaly detector based on the
Mahalanobis distance (MahaAD). A key reason for the inconsistencies of these
methods is the lack of a formal description of U-OOD. Motivated by a simple
thought experiment, we propose a characterization of U-OOD based on the
invariants of the training dataset. We show how this characterization is
unknowingly embodied in the top-scoring MahaAD method, thereby explaining its
quality. Furthermore, our approach can be used to interpret predictions of
U-OOD detectors and provides insights into good practices for evaluating future
U-OOD methods.
- Abstract(参考訳): unsupervised out-of-distribution (u-ood) 検出は最近、ミッションクリティカルなシステムにおける重要性と、教師付きシステムよりも幅広い適用性により、多くの注目を集めている。
このような注目の高まりにもかかわらず、U-OOD法は重要な欠点に悩まされている。
マハラノビス距離(MahaAD)に基づいて,様々なベンチマークと画像モダリティを大規模に評価することにより,最も一般的な最先端手法は,単純かつ比較的未知な異常検出器よりも一貫して優れていることを示す。
これらの手法の矛盾の主な理由は、U-OODの正式な記述がないことである。
簡単な思考実験により,トレーニングデータセットの不変量に基づくU-OODの特性評価を提案する。
本稿では,この特徴がMahaAD法においていかに無意識に具体化されているかを示す。
さらに,本手法は,U-OOD検出器の予測を解釈し,将来のU-OOD手法を評価するための優れたプラクティスに関する洞察を提供する。
関連論文リスト
- The Best of Both Worlds: On the Dilemma of Out-of-distribution Detection [75.65876949930258]
アウト・オブ・ディストリビューション(OOD)検出はモデル信頼性に不可欠である。
我々は,OODの一般化能力を秘かに犠牲にすることで,最先端手法のOOD検出性能が向上することを示す。
論文 参考訳(メタデータ) (2024-10-12T07:02:04Z) - Margin-bounded Confidence Scores for Out-of-Distribution Detection [2.373572816573706]
本稿では,非自明なOOD検出問題に対処するため,Margin bounded Confidence Scores (MaCS) と呼ばれる新しい手法を提案する。
MaCS は ID と OOD のスコアの差を拡大し、決定境界をよりコンパクトにする。
画像分類タスクのための様々なベンチマークデータセットの実験により,提案手法の有効性が示された。
論文 参考訳(メタデータ) (2024-09-22T05:40:25Z) - Rethinking Out-of-Distribution Detection on Imbalanced Data Distribution [38.844580833635725]
アーキテクチャ設計におけるバイアスを緩和し,不均衡なOOD検出器を増強する訓練時間正規化手法を提案する。
提案手法は,CIFAR10-LT,CIFAR100-LT,ImageNet-LTのベンチマークに対して一貫した改良を行う。
論文 参考訳(メタデータ) (2024-07-23T12:28:59Z) - Continual Unsupervised Out-of-Distribution Detection [5.019613806273252]
現在のアプローチでは、アウト・オブ・ディストリビューションのサンプルはトレーニング分布を補完する非集中分布に由来すると仮定している。
我々は,OOD分布に依存しないU-OOD検出器からスタートし,実際のOOD分布を考慮に入れた配置中を徐々に更新する手法を提案する。
本手法では,マハラノビス距離と最寄りのアプローチを組み合わせた新しいU-OODスコアリング関数を用いる。
論文 参考訳(メタデータ) (2024-06-04T13:57:34Z) - Unsupervised Evaluation of Out-of-distribution Detection: A Data-centric
Perspective [55.45202687256175]
アウト・オブ・ディストリビューション(OOD)検出法は、個々のテストサンプルがイン・ディストリビューション(IND)なのかOODなのかという、試験対象の真実を持っていると仮定する。
本稿では,OOD検出における教師なし評価問題を初めて紹介する。
我々は,OOD検出性能の教師なし指標としてGscoreを計算する3つの方法を提案する。
論文 参考訳(メタデータ) (2023-02-16T13:34:35Z) - OpenOOD: Benchmarking Generalized Out-of-Distribution Detection [60.13300701826931]
アウト・オブ・ディストリビューション(OOD)検出は、安全クリティカルな機械学習アプリケーションにとって不可欠である。
この分野では現在、統一的で厳格に定式化され、包括的なベンチマークが欠けている。
関連フィールドで開発された30以上のメソッドを実装したOpenOODという,統一的で構造化されたシステムを構築します。
論文 参考訳(メタデータ) (2022-10-13T17:59:57Z) - No True State-of-the-Art? OOD Detection Methods are Inconsistent across
Datasets [69.725266027309]
アウト・オブ・ディストリビューション検出は、信頼できるMLシステムの重要なコンポーネントである。
本研究では,これらの手法が16対の標準セット上でのOOD検出よりも本質的に優れていることを示す。
また、ある(ID, OOD)ペアにおいて他の(ID, OOD)ペアよりも優れる手法は、低データ方式ではそうしない可能性があることを示す。
論文 参考訳(メタデータ) (2021-09-12T16:35:00Z) - Contrastive Training for Improved Out-of-Distribution Detection [36.61315534166451]
本稿では,OOD検出性能向上のためのコントラストトレーニングを提案する。
コントラストトレーニングは,多くのベンチマークにおいてOOD検出性能を著しく向上させることを示す。
論文 参考訳(メタデータ) (2020-07-10T18:40:37Z) - ATOM: Robustifying Out-of-distribution Detection Using Outlier Mining [51.19164318924997]
インフォメーション・アウトリエ・マイニングによるアドリアトレーニングは、OOD検出の堅牢性を向上させる。
ATOMは,古典的,敵対的なOOD評価タスクの幅広いファミリーの下で,最先端のパフォーマンスを達成する。
論文 参考訳(メタデータ) (2020-06-26T20:58:05Z) - Robust Out-of-distribution Detection for Neural Networks [51.19164318924997]
既存の検出機構は, 分布内およびOOD入力の評価において, 極めて脆弱であることを示す。
ALOE と呼ばれる実効性のあるアルゴリズムを提案する。このアルゴリズムは,逆向きに構築された逆数と外数の両方の例にモデルを公開することにより,堅牢なトレーニングを行う。
論文 参考訳(メタデータ) (2020-03-21T17:46:28Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。