論文の概要: MOOD: Multi-level Out-of-distribution Detection
- arxiv url: http://arxiv.org/abs/2104.14726v1
- Date: Fri, 30 Apr 2021 02:18:31 GMT
- ステータス: 処理完了
- システム内更新日: 2021-05-04 01:56:55.804246
- Title: MOOD: Multi-level Out-of-distribution Detection
- Title(参考訳): mood: 多レベル分散検出
- Authors: Ziqian Lin, Sreya Dutta Roy, Yixuan Li
- Abstract要約: 異常な入力がデプロイ中にモデルが失敗するのを防ぐには、分散アウト・ディストリビューション(OOD)検出が不可欠です。
動的かつ効率的なOOD推論のための中間分類器出力を利用する,新しいフレームワークであるマルチレベルアウトオブディストリビューション検出MOODを提案する。
MOODは、競合するOOD検出性能を維持しながら、推論における最大71.05%の計算削減を実現します。
- 参考スコア(独自算出の注目度): 13.207044902083057
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Out-of-distribution (OOD) detection is essential to prevent anomalous inputs
from causing a model to fail during deployment. While improved OOD detection
methods have emerged, they often rely on the final layer outputs and require a
full feedforward pass for any given input. In this paper, we propose a novel
framework, multi-level out-of-distribution detection MOOD, which exploits
intermediate classifier outputs for dynamic and efficient OOD inference. We
explore and establish a direct relationship between the OOD data complexity and
optimal exit level, and show that easy OOD examples can be effectively detected
early without propagating to deeper layers. At each exit, the OOD examples can
be distinguished through our proposed adjusted energy score, which is both
empirically and theoretically suitable for networks with multiple classifiers.
We extensively evaluate MOOD across 10 OOD datasets spanning a wide range of
complexities. Experiments demonstrate that MOOD achieves up to 71.05%
computational reduction in inference, while maintaining competitive OOD
detection performance.
- Abstract(参考訳): out-of-distribution (ood) 検出は、異常な入力がデプロイ中にモデルが失敗するのを防ぐために不可欠である。
改良されたOOD検出手法が登場したが、最終的な層出力に依存し、任意の入力に対して完全なフィードフォワードパスを必要とすることが多い。
本稿では,動的かつ効率的なOOD推論のための中間分類器出力を利用する,新しいフレームワークであるマルチレベルアウトオブディストリビューション検出MOODを提案する。
我々は,OODデータ複雑性と最適出口レベルの直接的な関係を探求し,より深い層に伝播することなく,簡単なOODサンプルを早期に検出できることを示す。
各出口において、OODの例は、複数の分類器を持つネットワークに経験的かつ理論的に適合する調整エネルギースコアによって区別することができる。
幅広い複雑さにまたがる10個のOODデータセットにまたがるMOODを広範囲に評価した。
実験により, MOODは, 競合OOD検出性能を維持しながら, 71.05%の計算量削減を実現していることが示された。
関連論文リスト
- The Best of Both Worlds: On the Dilemma of Out-of-distribution Detection [75.65876949930258]
アウト・オブ・ディストリビューション(OOD)検出はモデル信頼性に不可欠である。
我々は,OODの一般化能力を秘かに犠牲にすることで,最先端手法のOOD検出性能が向上することを示す。
論文 参考訳(メタデータ) (2024-10-12T07:02:04Z) - WeiPer: OOD Detection using Weight Perturbations of Class Projections [11.130659240045544]
入力のよりリッチな表現を生成する最終完全連結層にクラスプロジェクションの摂動を導入する。
我々はOpenOODフレームワークの複数のベンチマークで最先端のOOD検出結果を得る。
論文 参考訳(メタデータ) (2024-05-27T13:38:28Z) - Meta OOD Learning for Continuously Adaptive OOD Detection [38.28089655572316]
現代のディープラーニングアプリケーションには、アウト・オブ・ディストリビューション(OOD)検出が不可欠である。
本稿では,CAOOD(Continuous Adaptive Out-of-distribution)検出という,新しい,より現実的な設定を提案する。
トレーニングプロセス中に優れたOOD検出モデルが学習されるように、学習適応図を設計し、メタOOD学習(MOL)を開発する。
論文 参考訳(メタデータ) (2023-09-21T01:05:45Z) - General-Purpose Multi-Modal OOD Detection Framework [5.287829685181842]
アウト・オブ・ディストリビューション(OOD)検出は、機械学習(ML)システムの安全性と信頼性を保証するために重要なトレーニングデータとは異なるテストサンプルを特定する。
本稿では,2値分類器とコントラスト学習コンポーネントを組み合わせた,汎用的な弱教師付きOOD検出フレームワークWOODを提案する。
提案したWOODモデルを複数の実世界のデータセット上で評価し、実験結果により、WOODモデルがマルチモーダルOOD検出の最先端手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2023-07-24T18:50:49Z) - Out-of-distribution Detection with Implicit Outlier Transformation [72.73711947366377]
外周露光(OE)は、オフ・オブ・ディストリビューション(OOD)検出において強力である。
我々は,未確認のOOD状況に対してモデルの性能を良くする,新しいOEベースのアプローチを提案する。
論文 参考訳(メタデータ) (2023-03-09T04:36:38Z) - Rethinking Out-of-distribution (OOD) Detection: Masked Image Modeling is
All You Need [52.88953913542445]
簡単な再構築手法を用いることで,OOD検出の性能が大幅に向上する可能性が示唆された。
我々は、OOD検出フレームワーク(MOOD)のプリテキストタスクとして、マスケ画像モデリング(Masked Image Modeling)を採用する。
論文 参考訳(メタデータ) (2023-02-06T08:24:41Z) - Pseudo-OOD training for robust language models [78.15712542481859]
OOD検出は、あらゆる産業規模のアプリケーションに対する信頼性の高い機械学習モデルの鍵となるコンポーネントである。
In-distribution(IND)データを用いて擬似OODサンプルを生成するPOORE-POORE-POSthoc pseudo-Ood Regularizationを提案する。
我々は3つの現実世界の対話システムに関する枠組みを広く評価し、OOD検出における新たな最先端技術を実現した。
論文 参考訳(メタデータ) (2022-10-17T14:32:02Z) - ATOM: Robustifying Out-of-distribution Detection Using Outlier Mining [51.19164318924997]
インフォメーション・アウトリエ・マイニングによるアドリアトレーニングは、OOD検出の堅牢性を向上させる。
ATOMは,古典的,敵対的なOOD評価タスクの幅広いファミリーの下で,最先端のパフォーマンスを達成する。
論文 参考訳(メタデータ) (2020-06-26T20:58:05Z) - Robust Out-of-distribution Detection for Neural Networks [51.19164318924997]
既存の検出機構は, 分布内およびOOD入力の評価において, 極めて脆弱であることを示す。
ALOE と呼ばれる実効性のあるアルゴリズムを提案する。このアルゴリズムは,逆向きに構築された逆数と外数の両方の例にモデルを公開することにより,堅牢なトレーニングを行う。
論文 参考訳(メタデータ) (2020-03-21T17:46:28Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。