論文の概要: Robust Out-of-Distribution Detection on Deep Probabilistic Generative
Models
- arxiv url: http://arxiv.org/abs/2106.07903v1
- Date: Tue, 15 Jun 2021 06:36:10 GMT
- ステータス: 処理完了
- システム内更新日: 2021-06-16 15:26:22.858209
- Title: Robust Out-of-Distribution Detection on Deep Probabilistic Generative
Models
- Title(参考訳): 深部確率生成モデルにおけるロバスト分布外検出
- Authors: Jaemoo Choi, Changyeon Yoon, Jeongwoo Bae, Myungjoo Kang
- Abstract要約: アウト・オブ・ディストリビューション(OOD)検出は機械学習システムにおいて重要な課題である。
深い確率的生成モデルは、データサンプルの可能性を推定することによって、OODの検出を容易にする。
本稿では,外周露光を伴わない新しい検出指標を提案する。
- 参考スコア(独自算出の注目度): 0.06372261626436676
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Out-of-distribution (OOD) detection is an important task in machine learning
systems for ensuring their reliability and safety. Deep probabilistic
generative models facilitate OOD detection by estimating the likelihood of a
data sample. However, such models frequently assign a suspiciously high
likelihood to a specific outlier. Several recent works have addressed this
issue by training a neural network with auxiliary outliers, which are generated
by perturbing the input data. In this paper, we discover that these approaches
fail for certain OOD datasets. Thus, we suggest a new detection metric that
operates without outlier exposure. We observe that our metric is robust to
diverse variations of an image compared to the previous outlier-exposing
methods. Furthermore, our proposed score requires neither auxiliary models nor
additional training. Instead, this paper utilizes the likelihood ratio
statistic in a new perspective to extract genuine properties from the given
single deep probabilistic generative model. We also apply a novel numerical
approximation to enable fast implementation. Finally, we demonstrate
comprehensive experiments on various probabilistic generative models and show
that our method achieves state-of-the-art performance.
- Abstract(参考訳): アウト・オブ・ディストリビューション(OOD)検出は、信頼性と安全性を確保するための機械学習システムにおいて重要なタスクである。
深い確率的生成モデルは、データサンプルの可能性を推定することでOODの検出を容易にする。
しかし、そのようなモデルは、しばしば不審に高い確率を特定の外れ値に割り当てる。
いくつかの最近の研究は、入力データの摂動によって生成される補助的なアウトリーチを持つニューラルネットワークをトレーニングすることでこの問題に対処している。
本稿では,特定のOODデータセットに対してこれらのアプローチが失敗することを明らかにする。
そこで我々は,外周露光を伴わない新しい検出基準を提案する。
我々は,従来の外乱露光法と比較して,画像の多様性に頑健であることが観察された。
さらに,提案手法では補助モデルも追加訓練も必要としない。
その代わり,本論文では,与えられた単一深度確率的生成モデルから真の特性を抽出するために,新しい視点で確率比統計を利用する。
また,高速な実装を実現するために,新しい数値近似を適用した。
最後に,様々な確率的生成モデルに関する包括的実験を行い,本手法が最先端の性能を実現することを示す。
関連論文リスト
- Forte : Finding Outliers with Representation Typicality Estimation [0.14061979259370275]
生成モデルは、それを訓練する実際のデータとほぼ区別できない合成データを生成することができる。
OOD検出に関する最近の研究は、生成モデルの可能性が最適なOOD検出器であるという疑念を提起している。
本稿では,表現学習と,多様体推定に基づく情報的要約統計を利用した新しい手法を提案する。
論文 参考訳(メタデータ) (2024-10-02T08:26:37Z) - Diversified Outlier Exposure for Out-of-Distribution Detection via
Informative Extrapolation [110.34982764201689]
Out-of-Distribution(OOD)検出は、現実のアプリケーションに信頼性の高い機械学習モデルをデプロイするために重要である。
近年, 外部曝露によるOOD検出に有意な結果が得られた。
本稿では,補助外乱量に基づく情報外挿による効果的なOOD検出のための新しい枠組み,すなわちDivOE(Diversified Outlier Exposure)を提案する。
論文 参考訳(メタデータ) (2023-10-21T07:16:09Z) - Unleashing Mask: Explore the Intrinsic Out-of-Distribution Detection
Capability [70.72426887518517]
Out-of-Distribution(OOD)検出は、機械学習モデルを現実世界のアプリケーションにデプロイする際に、セキュアAIの必須の側面である。
本稿では,IDデータを用いた学習モデルのOOD識別能力を復元する新しい手法であるUnleashing Maskを提案する。
本手法では, マスクを用いて記憶した非定型サンプルを抽出し, モデルを微調整するか, 導入したマスクでプルーする。
論文 参考訳(メタデータ) (2023-06-06T14:23:34Z) - Watermarking for Out-of-distribution Detection [76.20630986010114]
Out-of-Distribution (OOD) 検出は、よく訓練された深層モデルから抽出された表現に基づいてOODデータを識別することを目的としている。
本稿では,透かしという一般的な手法を提案する。
我々は,元データの特徴に重畳される統一パターンを学習し,ウォーターマーキング後にモデルの検出能力が大きく向上する。
論文 参考訳(メタデータ) (2022-10-27T06:12:32Z) - Reduced Robust Random Cut Forest for Out-Of-Distribution detection in
machine learning models [0.799536002595393]
ほとんどの機械学習ベースの回帰器は、限られた長さの過去の観測を通して収集されたデータから情報を抽出し、将来予測する。
これらのトレーニングモデルへの入力は、トレーニングに使用されるデータと統計特性が著しく異なるデータである場合、正確な予測は保証されない。
本稿では,ロバストランダムカットフォレストデータ構造を用いた新しい検出手法を提案する。
論文 参考訳(メタデータ) (2022-06-18T17:01:40Z) - Autoencoder Attractors for Uncertainty Estimation [13.618797548020462]
本稿では,オートエンコーダモデルに基づく不確実性推定手法を提案する。
提案手法は,車室内における占有者分類の産業的応用だけでなく,いくつかのデータセットの組み合わせについても検討した。
論文 参考訳(メタデータ) (2022-04-01T12:10:06Z) - Leveraging Unlabeled Data to Predict Out-of-Distribution Performance [63.740181251997306]
実世界の機械学習デプロイメントは、ソース(トレーニング)とターゲット(テスト)ディストリビューションのミスマッチによって特徴づけられる。
本研究では,ラベル付きソースデータとラベルなしターゲットデータのみを用いて,対象領域の精度を予測する手法を検討する。
本稿では,モデルの信頼度をしきい値として学習し,精度をラベルなし例のごく一部として予測する実践的手法である平均閾値保持信頼度(ATC)を提案する。
論文 参考訳(メタデータ) (2022-01-11T23:01:12Z) - Sampling from Arbitrary Functions via PSD Models [55.41644538483948]
まず確率分布をモデル化し,そのモデルからサンプリングする。
これらのモデルでは, 少数の評価値を用いて, 高精度に多数の密度を近似することが可能であることが示され, それらのモデルから効果的にサンプルする簡単なアルゴリズムが提示される。
論文 参考訳(メタデータ) (2021-10-20T12:25:22Z) - Efficient remedies for outlier detection with variational autoencoders [8.80692072928023]
深層生成モデルによって計算される類似度は、ラベルなしデータによる外れ値検出の候補メトリックである。
理論的に定位された補正は、VAE推定値による鍵バイアスを容易に改善することを示す。
また,VAEのアンサンブル上で計算される確率の分散により,ロバストな外乱検出が可能となることを示す。
論文 参考訳(メタデータ) (2021-08-19T16:00:58Z) - Open Set Recognition with Conditional Probabilistic Generative Models [51.40872765917125]
オープンセット認識のための条件付き確率生成モデル(CPGM)を提案する。
CPGMは未知のサンプルを検出できるが、異なる潜在特徴を条件付きガウス分布に近似させることで、既知のクラスを分類できる。
複数のベンチマークデータセットの実験結果から,提案手法がベースラインを著しく上回ることがわかった。
論文 参考訳(メタデータ) (2020-08-12T06:23:49Z) - Likelihood Regret: An Out-of-Distribution Detection Score For
Variational Auto-encoder [6.767885381740952]
確率的生成モデルは、ある種のアウト・オブ・ディストリビューション・サンプルに対して高い確率を割り当てることができる。
VAEのための効率的なOODスコアであるLikelihood Regretを提案する。
論文 参考訳(メタデータ) (2020-03-06T00:30:38Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。