論文の概要: Full-Spectrum Out-of-Distribution Detection
- arxiv url: http://arxiv.org/abs/2204.05306v1
- Date: Mon, 11 Apr 2022 17:59:14 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-12 13:53:09.331608
- Title: Full-Spectrum Out-of-Distribution Detection
- Title(参考訳): 全スペクトル分布検出
- Authors: Jingkang Yang, Kaiyang Zhou, Ziwei Liu
- Abstract要約: 両シフトタイプを考慮し、フルスペクトルOOD(FS-OOD)検出を導入する。
本稿では,単純な特徴に基づくセマンティックススコア関数であるSEMを提案する。
SEMは現在の最先端の手法を大きく上回っている。
- 参考スコア(独自算出の注目度): 42.98617540431124
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Existing out-of-distribution (OOD) detection literature clearly defines
semantic shift as a sign of OOD but does not have a consensus over covariate
shift. Samples experiencing covariate shift but not semantic shift are either
excluded from the test set or treated as OOD, which contradicts the primary
goal in machine learning -- being able to generalize beyond the training
distribution. In this paper, we take into account both shift types and
introduce full-spectrum OOD (FS-OOD) detection, a more realistic problem
setting that considers both detecting semantic shift and being tolerant to
covariate shift; and designs three benchmarks. These new benchmarks have a more
fine-grained categorization of distributions (i.e., training ID,
covariate-shifted ID, near-OOD, and far-OOD) for the purpose of more
comprehensively evaluating the pros and cons of algorithms. To address the
FS-OOD detection problem, we propose SEM, a simple feature-based semantics
score function. SEM is mainly composed of two probability measures: one is
based on high-level features containing both semantic and non-semantic
information, while the other is based on low-level feature statistics only
capturing non-semantic image styles. With a simple combination, the
non-semantic part is cancelled out, which leaves only semantic information in
SEM that can better handle FS-OOD detection. Extensive experiments on the three
new benchmarks show that SEM significantly outperforms current state-of-the-art
methods. Our code and benchmarks are released in
https://github.com/Jingkang50/OpenOOD.
- Abstract(参考訳): 既存のアウト・オブ・ディストリビューション(OOD)検出文献は、セマンティックシフトをOODの兆候として明確に定義しているが、共変量シフトに関するコンセンサスを持たない。
共変量シフトを経験するが意味的シフトではないサンプルは、テストセットから除外されるか、oodとして扱われる。
本稿では、シフトタイプとフルスペクトルOOD(FS-OOD)検出の両方を考慮して、セマンティックシフトの検出とコバリアレートシフトに対する耐性の両方を考慮したより現実的な問題設定を行い、3つのベンチマークを設計する。
これらの新しいベンチマークは、アルゴリズムの長所と短所をより包括的に評価するために、よりきめ細かい分布(訓練ID、共変量シフトID、近くOOD、遠OOD)を分類する。
FS-OOD検出問題に対処するため,単純な特徴に基づくセマンティックススコア関数であるSEMを提案する。
SEMは主に2つの確率測度から構成される: 1つは意味的情報と非意味的情報の両方を含む高レベル特徴に基づいており、もう1つは低レベル特徴統計に基づいて非意味的画像スタイルをキャプチャする。
単純な組み合わせで、非意味的な部分はキャンセルされ、FS-OOD検出をよりうまく処理できるSEMにのみ意味情報が残される。
3つの新しいベンチマークの大規模な実験により、SEMは現在の最先端手法よりも大幅に優れていることが示された。
私たちのコードとベンチマークはhttps://github.com/Jingkang50/OpenOOD.orgで公開されています。
関連論文リスト
- Rethinking the Evaluation of Out-of-Distribution Detection: A Sorites Paradox [70.57120710151105]
既存のアウト・オブ・ディストリビューション(OOD)検出ベンチマークは、サンプルを新しいラベルでOODデータとして分類する。
いくつかの限界OODサンプルは、実際には分布内(ID)サンプルに密接なセマンティック内容を持ち、OODサンプルをソリテスパラドックス(英語版)と判定する。
この問題に対処するため,Incremental Shift OOD (IS-OOD) というベンチマークを構築した。
論文 参考訳(メタデータ) (2024-06-14T09:27:56Z) - Likelihood-Aware Semantic Alignment for Full-Spectrum
Out-of-Distribution Detection [24.145060992747077]
画像とテキストの対応を意味的に高次領域に促進する「Likelihood-Aware Semantic Alignment (LSA)フレームワーク」を提案する。
2つのF-OODベンチマークで15.26%$と18.88%$の差で既存の手法を上回り、提案したLSAの優れたOOD検出性能を実証した。
論文 参考訳(メタデータ) (2023-12-04T08:53:59Z) - From Global to Local: Multi-scale Out-of-distribution Detection [129.37607313927458]
アウト・オブ・ディストリビューション(OOD)検出は、イン・ディストリビューション(ID)トレーニングプロセス中にラベルが見られない未知のデータを検出することを目的としている。
近年の表現学習の進歩により,距離に基づくOOD検出がもたらされる。
グローバルな視覚情報と局所的な情報の両方を活用する第1のフレームワークであるマルチスケールOOD検出(MODE)を提案する。
論文 参考訳(メタデータ) (2023-08-20T11:56:25Z) - Out-of-Distributed Semantic Pruning for Robust Semi-Supervised Learning [17.409939628100517]
我々は,OODセマンティック・プルーニング(OSP)と呼ばれる統合フレームワークを提案する。
OSPは、ID分類の精度を13.7%、TinyImageNetデータセットのOOD検出のAUROCの5.9%に上回っている。
論文 参考訳(メタデータ) (2023-05-29T15:37:07Z) - Fine-Tuning Deteriorates General Textual Out-of-Distribution Detection
by Distorting Task-Agnostic Features [14.325845491628087]
アウト・オブ・ディストリビューション(OOD)入力は、自然言語処理(NLP)モデルの安全なデプロイに不可欠である。
本研究は,意味的および非意味的変化を検出するための主流テキストOOD検出手法を評価するための第一歩である。
本稿では,タスク非依存およびタスク特化表現から得られた信頼スコアを統合する,GNOMEという単純なOODスコアを提案する。
論文 参考訳(メタデータ) (2023-01-30T08:01:13Z) - Breaking Down Out-of-Distribution Detection: Many Methods Based on OOD
Training Data Estimate a Combination of the Same Core Quantities [104.02531442035483]
本研究の目的は,OOD検出手法の暗黙的なスコアリング機能を識別すると同時に,共通の目的を認識することである。
内分布と外分布の2値差はOOD検出問題のいくつかの異なる定式化と等価であることを示す。
また, 外乱露光で使用される信頼損失は, 理論上最適のスコアリング関数と非自明な方法で異なる暗黙的なスコアリング関数を持つことを示した。
論文 参考訳(メタデータ) (2022-06-20T16:32:49Z) - Exploring Covariate and Concept Shift for Detection and Calibration of
Out-of-Distribution Data [77.27338842609153]
キャラクタリゼーションにより、OODデータの検出と信頼性校正には、それぞれのシフトに対する感度が重要であることが明らかになった。
分布内データのみを用いて両シフトでのOOD検出を改善するために,幾何学的に着想を得た手法を提案する。
我々は,OOD検出とキャリブレーションの両面で,異なるタイプのシフトの下でうまく機能する手法を最初に提案する。
論文 参考訳(メタデータ) (2021-10-28T15:42:55Z) - Semantically Coherent Out-of-Distribution Detection [26.224146828317277]
現在のアウト・オブ・ディストリビューション(OOD)検出ベンチマークは、ひとつのデータセットをイン・ディストリビューション(ID)として定義し、他のすべてのデータセットをOODとして定義することで、一般的に構築されている。
ベンチマークを再設計し、セマンティック・コヒーレント・アウト・オブ・ディストリビューション検出(SC-OOD)を提案する。
本手法は,SC-OODベンチマークにおける最先端性能を実現する。
論文 参考訳(メタデータ) (2021-08-26T17:53:32Z) - Triggering Failures: Out-Of-Distribution detection by learning from
local adversarial attacks in Semantic Segmentation [76.2621758731288]
セグメンテーションにおけるアウト・オブ・ディストリビューション(OOD)オブジェクトの検出に取り組む。
私たちの主な貢献は、ObsNetと呼ばれる新しいOOD検出アーキテクチャであり、ローカル・アタック(LAA)に基づく専用トレーニングスキームと関連付けられています。
3つの異なるデータセットの文献の最近の10つの手法と比較して,速度と精度の両面で最高の性能が得られることを示す。
論文 参考訳(メタデータ) (2021-08-03T17:09:56Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。