論文の概要: Likelihood Regret: An Out-of-Distribution Detection Score For
Variational Auto-encoder
- arxiv url: http://arxiv.org/abs/2003.02977v3
- Date: Sat, 10 Oct 2020 21:58:14 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-26 00:26:00.081416
- Title: Likelihood Regret: An Out-of-Distribution Detection Score For
Variational Auto-encoder
- Title(参考訳): likelihood regret: 変分オートエンコーダのための分散検出スコア
- Authors: Zhisheng Xiao, Qing Yan, Yali Amit
- Abstract要約: 確率的生成モデルは、ある種のアウト・オブ・ディストリビューション・サンプルに対して高い確率を割り当てることができる。
VAEのための効率的なOODスコアであるLikelihood Regretを提案する。
- 参考スコア(独自算出の注目度): 6.767885381740952
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Deep probabilistic generative models enable modeling the likelihoods of very
high dimensional data. An important application of generative modeling should
be the ability to detect out-of-distribution (OOD) samples by setting a
threshold on the likelihood. However, some recent studies show that
probabilistic generative models can, in some cases, assign higher likelihoods
on certain types of OOD samples, making the OOD detection rules based on
likelihood threshold problematic. To address this issue, several OOD detection
methods have been proposed for deep generative models. In this paper, we make
the observation that many of these methods fail when applied to generative
models based on Variational Auto-encoders (VAE). As an alternative, we propose
Likelihood Regret, an efficient OOD score for VAEs. We benchmark our proposed
method over existing approaches, and empirical results suggest that our method
obtains the best overall OOD detection performances when applied to VAEs.
- Abstract(参考訳): 深い確率的生成モデルは、非常に高次元データの可能性のモデル化を可能にする。
生成モデルの重要な応用は、可能性のしきい値を設定することにより、配布外サンプル(OOD)を検出する能力である。
しかし、近年の研究では、確率的生成モデルが特定の種類のOODサンプルに対して高い確率を割り当てることができることが示されており、OOD検出規則は確率しきい値に基づいて問題となる。
この問題に対処するため, 深部生成モデルのためのOOD検出法がいくつか提案されている。
本稿では,変分オートエンコーダ(VAE)に基づく生成モデルに適用した場合,これらの手法の多くが失敗することを示す。
代替として,VAEの効率的なOODスコアであるLikelihood Regretを提案する。
提案手法を既存手法に対してベンチマークし, 実験結果から, VAEに適用した場合のOOD検出性能が最適であることが示唆された。
関連論文リスト
- Out-of-Distribution Detection with a Single Unconditional Diffusion Model [54.15132801131365]
アウト・オブ・ディストリビューション(OOD)検出は、異常サンプルを特定しようとする機械学習において重要なタスクである。
従来、教師なし手法はOOD検出に深い生成モデルを用いていた。
本稿では,単一モデルが多様なタスクに対してOOD検出を行うことができるかどうかを考察する。
論文 参考訳(メタデータ) (2024-05-20T08:54:03Z) - Model Reprogramming Outperforms Fine-tuning on Out-of-distribution Data in Text-Image Encoders [56.47577824219207]
本稿では,侵入的微調整技術に関連する隠れたコストを明らかにする。
ファインチューニングのための新しいモデル再プログラミング手法を導入し、それをリプログラマと呼ぶ。
我々の経験的証拠は、Re Programmerは侵入力が少なく、より優れた下流モデルが得られることを示している。
論文 参考訳(メタデータ) (2024-03-16T04:19:48Z) - Unsupervised Out-of-Distribution Detection by Restoring Lossy Inputs
with Variational Autoencoder [3.498694457257263]
OOD検出のための新しいVAEベースのスコアであるError Reduction(ER)を提案する。
ERは、トレーニングセットの損失バージョンを入力として、元のセットをターゲットとして、VAEに基づいています。
論文 参考訳(メタデータ) (2023-09-05T09:42:15Z) - Unleashing Mask: Explore the Intrinsic Out-of-Distribution Detection
Capability [70.72426887518517]
Out-of-Distribution(OOD)検出は、機械学習モデルを現実世界のアプリケーションにデプロイする際に、セキュアAIの必須の側面である。
本稿では,IDデータを用いた学習モデルのOOD識別能力を復元する新しい手法であるUnleashing Maskを提案する。
本手法では, マスクを用いて記憶した非定型サンプルを抽出し, モデルを微調整するか, 導入したマスクでプルーする。
論文 参考訳(メタデータ) (2023-06-06T14:23:34Z) - Watermarking for Out-of-distribution Detection [76.20630986010114]
Out-of-Distribution (OOD) 検出は、よく訓練された深層モデルから抽出された表現に基づいてOODデータを識別することを目的としている。
本稿では,透かしという一般的な手法を提案する。
我々は,元データの特徴に重畳される統一パターンを学習し,ウォーターマーキング後にモデルの検出能力が大きく向上する。
論文 参考訳(メタデータ) (2022-10-27T06:12:32Z) - Robust Out-of-Distribution Detection on Deep Probabilistic Generative
Models [0.06372261626436676]
アウト・オブ・ディストリビューション(OOD)検出は機械学習システムにおいて重要な課題である。
深い確率的生成モデルは、データサンプルの可能性を推定することによって、OODの検出を容易にする。
本稿では,外周露光を伴わない新しい検出指標を提案する。
論文 参考訳(メタデータ) (2021-06-15T06:36:10Z) - Learn what you can't learn: Regularized Ensembles for Transductive
Out-of-distribution Detection [76.39067237772286]
ニューラルネットワークの現在のアウト・オブ・ディストリビューション(OOD)検出アルゴリズムは,様々なOOD検出シナリオにおいて不満足な結果をもたらすことを示す。
本稿では,テストデータのバッチを観察した後に検出方法を調整することで,このような「ハード」なOODシナリオがいかに有用かを検討する。
本稿では,テストデータと正規化に人工ラベリング手法を用いて,テストバッチ内のOODサンプルに対してのみ矛盾予測を生成するモデルのアンサンブルを求める手法を提案する。
論文 参考訳(メタデータ) (2020-12-10T16:55:13Z) - Unsupervised Anomaly Detection with Adversarial Mirrored AutoEncoders [51.691585766702744]
本稿では,識別器のミラー化ワッサースタイン損失を利用して,よりセマンティックレベルの再構築を行う逆自動エンコーダの変種を提案する。
我々は,再建基準の代替として,異常スコアの代替尺度を提案した。
提案手法は,OOD検出ベンチマークにおける異常検出の最先端手法よりも優れている。
論文 参考訳(メタデータ) (2020-03-24T08:26:58Z) - Detecting Out-of-Distribution Examples with In-distribution Examples and
Gram Matrices [8.611328447624679]
ディープニューラルネットワークは、アウト・オブ・ディストリビューション(Out-of-Distribution)の例で示すと、信頼性と誤った予測をもたらす。
本稿では,行動パターンとクラス予測の不整合を識別し,OODのサンプルを検出することを提案する。
グラム行列による活動パターンの特徴付けとグラム行列値の異常の同定により,高いOOD検出率が得られることがわかった。
論文 参考訳(メタデータ) (2019-12-28T19:44:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。