論文の概要: Out of Distribution Reasoning by Weakly-Supervised Disentangled Logic
Variational Autoencoder
- arxiv url: http://arxiv.org/abs/2210.09959v1
- Date: Tue, 18 Oct 2022 16:15:55 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-19 15:32:21.638957
- Title: Out of Distribution Reasoning by Weakly-Supervised Disentangled Logic
Variational Autoencoder
- Title(参考訳): 弱教師付き分散論理変分オートエンコーダによる配電共振
- Authors: Zahra Rahiminasab, Michael Yuhas and Arvind Easwaran
- Abstract要約: 我々は,複雑なデータセットを推論するために,部分的に歪んだVAEを学習するOOD推論フレームワークを提案する。
本フレームワークは,観測された生成因子に基づくデータのパーティショニング,非絡み合いルールを満たす論理テンソルネットワークとしてのVAEのトレーニング,実行時のOOD推論という3つのステップから構成される。
- 参考スコア(独自算出の注目度): 4.45176460665627
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Out-of-distribution (OOD) detection, i.e., finding test samples derived from
a different distribution than the training set, as well as reasoning about such
samples (OOD reasoning), are necessary to ensure the safety of results
generated by machine learning models. Recently there have been promising
results for OOD detection in the latent space of variational autoencoders
(VAEs). However, without disentanglement, VAEs cannot perform OOD reasoning.
Disentanglement ensures a one- to-many mapping between generative factors of
OOD (e.g., rain in image data) and the latent variables to which they are
encoded. Although previous literature has focused on weakly-supervised
disentanglement on simple datasets with known and independent generative
factors. In practice, achieving full disentanglement through weak supervision
is impossible for complex datasets, such as Carla, with unknown and abstract
generative factors. As a result, we propose an OOD reasoning framework that
learns a partially disentangled VAE to reason about complex datasets. Our
framework consists of three steps: partitioning data based on observed
generative factors, training a VAE as a logic tensor network that satisfies
disentanglement rules, and run-time OOD reasoning. We evaluate our approach on
the Carla dataset and compare the results against three state-of-the-art
methods. We found that our framework outperformed these methods in terms of
disentanglement and end-to-end OOD reasoning.
- Abstract(参考訳): 機械学習モデルによって生成された結果の安全性を確保するためには、アウト・オブ・ディストリビューション(OOD)検出、すなわちトレーニングセットとは異なる分布から得られたテストサンプルの発見、およびそのようなサンプルの推論(OOD推論)が必要である。
近年,変分オートエンコーダ(VAE)の潜時空間におけるOOD検出の有望な結果が報告されている。
しかし、VAEは絡み合うことなくOOD推論を行うことはできない。
ディスタングルメントは、OODの生成因子(例えば画像データの雨)と、それらが符号化される潜伏変数の間の一対多のマッピングを保証する。
以前の文献では、既知のおよび独立した生成因子を持つ単純なデータセットの弱い教師付き不連続に焦点が当てられていた。
実際には、carlaのような複雑なデータセットでは、弱い監督による完全な乱れを達成することは不可能であり、未知で抽象的な生成要因がある。
その結果、複雑なデータセットを推論するために、部分的に歪んだVAEを学習するOOD推論フレームワークを提案する。
我々のフレームワークは,観測された生成因子に基づくデータの分割,非絡み合いルールを満たす論理テンソルネットワークとしてのVAEのトレーニング,実行時のOOD推論という3つのステップから構成される。
このアプローチをcarlaデータセット上で評価し,その結果を3つの最先端手法と比較した。
我々のフレームワークは, 絡み合いやエンドツーエンドのOOD推論において, これらの手法よりも優れていた。
関連論文リスト
- Double Descent Meets Out-of-Distribution Detection: Theoretical Insights and Empirical Analysis on the role of model complexity [2.206582444513284]
トレーニングとOODサンプルの両方において,分類器の信頼性を評価するためのOODリスク指標を提案する。
パラメータ数がサンプル数に等しい場合,OODリスクは無限のピークを示す。
論文 参考訳(メタデータ) (2024-11-04T15:39:12Z) - Out-of-distribution Detection Learning with Unreliable
Out-of-distribution Sources [73.28967478098107]
アウト・オブ・ディストリビューション(OOD)検出は、予測者が有効な予測を行うことができないOODデータをイン・ディストリビューション(ID)データとして識別する。
通常、OODパターンを識別できる予測器をトレーニングするために、実際のアウト・オブ・ディストリビューション(OOD)データを収集するのは困難である。
本稿では,Auxiliary Task-based OOD Learning (ATOL) というデータ生成に基づく学習手法を提案する。
論文 参考訳(メタデータ) (2023-11-06T16:26:52Z) - SR-OOD: Out-of-Distribution Detection via Sample Repairing [48.272537939227206]
アウト・オブ・ディストリビューション(OOD)検出は、機械学習モデルの信頼性と堅牢性を保証するための重要なタスクである。
近年の研究では、生成モデルはOODサンプルに高い信頼度を割り当てることがしばしばあり、データのセマンティックな情報を捕捉できないことが示されている。
我々は,サンプル修復の利点を生かし,新しいOOD検出フレームワーク,SR-OODを提案する。
本フレームワークは,OOD検出における最先端な生成手法よりも優れた性能を実現する。
論文 参考訳(メタデータ) (2023-05-26T16:35:20Z) - Pseudo-OOD training for robust language models [78.15712542481859]
OOD検出は、あらゆる産業規模のアプリケーションに対する信頼性の高い機械学習モデルの鍵となるコンポーネントである。
In-distribution(IND)データを用いて擬似OODサンプルを生成するPOORE-POORE-POSthoc pseudo-Ood Regularizationを提案する。
我々は3つの現実世界の対話システムに関する枠組みを広く評価し、OOD検出における新たな最先端技術を実現した。
論文 参考訳(メタデータ) (2022-10-17T14:32:02Z) - Breaking Down Out-of-Distribution Detection: Many Methods Based on OOD
Training Data Estimate a Combination of the Same Core Quantities [104.02531442035483]
本研究の目的は,OOD検出手法の暗黙的なスコアリング機能を識別すると同時に,共通の目的を認識することである。
内分布と外分布の2値差はOOD検出問題のいくつかの異なる定式化と等価であることを示す。
また, 外乱露光で使用される信頼損失は, 理論上最適のスコアリング関数と非自明な方法で異なる暗黙的なスコアリング関数を持つことを示した。
論文 参考訳(メタデータ) (2022-06-20T16:32:49Z) - Multiple Testing Framework for Out-of-Distribution Detection [27.248375922343616]
本研究では,学習アルゴリズムの出力を推定時に信頼できるかどうかを検知するOOD(Out-of-Distribution)検出の問題について検討する。
我々は,OOD検出のための強力なテスト構築のための洞察を提供する,入力分布と学習アルゴリズムの両方を含むOOD概念の定義を提案する。
論文 参考訳(メタデータ) (2022-06-20T00:56:01Z) - Training OOD Detectors in their Natural Habitats [31.565635192716712]
アウト・オブ・ディストリビューション(OOD)検出は、野生にデプロイされた機械学習モデルにとって重要である。
近年の手法では,OOD検出の改善のために補助外乱データを用いてモデルを正規化している。
我々は、自然にIDとOODの両方のサンプルで構成される野生の混合データを活用する新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2022-02-07T15:38:39Z) - WOOD: Wasserstein-based Out-of-Distribution Detection [6.163329453024915]
ディープ・ニューラル・ネットワークに基づく分類器のトレーニングデータは、通常同じ分布からサンプリングされる。
トレーニングサンプルから遠く離れた分布からテストサンプルの一部を引き出すと、トレーニングされたニューラルネットワークはこれらのOODサンプルに対して高い信頼性の予測を行う傾向にある。
本稿では,これらの課題を克服するため,Wasserstein を用いたアウト・オブ・ディストリビューション検出(WOOD)手法を提案する。
論文 参考訳(メタデータ) (2021-12-13T02:35:15Z) - No True State-of-the-Art? OOD Detection Methods are Inconsistent across
Datasets [69.725266027309]
アウト・オブ・ディストリビューション検出は、信頼できるMLシステムの重要なコンポーネントである。
本研究では,これらの手法が16対の標準セット上でのOOD検出よりも本質的に優れていることを示す。
また、ある(ID, OOD)ペアにおいて他の(ID, OOD)ペアよりも優れる手法は、低データ方式ではそうしない可能性があることを示す。
論文 参考訳(メタデータ) (2021-09-12T16:35:00Z) - Learn what you can't learn: Regularized Ensembles for Transductive
Out-of-distribution Detection [76.39067237772286]
ニューラルネットワークの現在のアウト・オブ・ディストリビューション(OOD)検出アルゴリズムは,様々なOOD検出シナリオにおいて不満足な結果をもたらすことを示す。
本稿では,テストデータのバッチを観察した後に検出方法を調整することで,このような「ハード」なOODシナリオがいかに有用かを検討する。
本稿では,テストデータと正規化に人工ラベリング手法を用いて,テストバッチ内のOODサンプルに対してのみ矛盾予測を生成するモデルのアンサンブルを求める手法を提案する。
論文 参考訳(メタデータ) (2020-12-10T16:55:13Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。