論文の概要: NoiseRank: Unsupervised Label Noise Reduction with Dependence Models
- arxiv url: http://arxiv.org/abs/2003.06729v1
- Date: Sun, 15 Mar 2020 01:10:25 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-23 08:29:16.441064
- Title: NoiseRank: Unsupervised Label Noise Reduction with Dependence Models
- Title(参考訳): ノイズランク:依存モデルによる教師なしラベルノイズ低減
- Authors: Karishma Sharma, Pinar Donmez, Enming Luo, Yan Liu, I. Zeki Yalniz
- Abstract要約: マルコフランダム場(MRF)を用いた教師なしラベル雑音低減のためのノイズRankを提案する。
本研究では,データセットに誤ってラベル付けされたインスタンスの後方確率と,その推定確率に基づいてランク付けされたインスタンスを推定する依存性モデルを構築した。
NORankはFood101-N(20%ノイズ)の最先端分類を改善し、高雑音クローティング-1M(40%ノイズ)に有効である
- 参考スコア(独自算出の注目度): 11.08987870095179
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Label noise is increasingly prevalent in datasets acquired from noisy
channels. Existing approaches that detect and remove label noise generally rely
on some form of supervision, which is not scalable and error-prone. In this
paper, we propose NoiseRank, for unsupervised label noise reduction using
Markov Random Fields (MRF). We construct a dependence model to estimate the
posterior probability of an instance being incorrectly labeled given the
dataset, and rank instances based on their estimated probabilities. Our method
1) Does not require supervision from ground-truth labels, or priors on label or
noise distribution. 2) It is interpretable by design, enabling transparency in
label noise removal. 3) It is agnostic to classifier architecture/optimization
framework and content modality. These advantages enable wide applicability in
real noise settings, unlike prior works constrained by one or more conditions.
NoiseRank improves state-of-the-art classification on Food101-N (~20% noise),
and is effective on high noise Clothing-1M (~40% noise).
- Abstract(参考訳): ラベルノイズは、ノイズの多いチャネルから取得したデータセットでますます広まっている。
ラベルノイズを検出して削除する既存のアプローチは、一般的にある種の監視に依存している。
本稿では,マルコフ確率場(mrf)を用いた教師なしラベル雑音低減のためのノイズランクを提案する。
本研究では,データセットを誤ってラベル付けしたインスタンスの後方確率を推定する依存モデルを構築し,その推定確率に基づいてランク付けする。
我々の方法
1) 接地ラベルの監督やラベルや騒音分布の事前管理は不要である。
2) 設計により解釈可能であり, ラベルノイズ除去の透明性が期待できる。
3) 分類/最適化フレームワークやコンテンツモダリティとは無関係である。
これらの利点は、1つ以上の条件で制約された以前の作業とは異なり、実際のノイズ設定において広範囲に適用可能である。
NoiseRankは、Food101-N(~20%ノイズ)の最先端の分類を改善し、高雑音クロチング-1M(~40%ノイズ)に有効である。
関連論文リスト
- AlleNoise -- large-scale text classification benchmark dataset with real-world label noise [40.11095094521714]
我々は、実世界のインスタンス依存ラベルノイズを持つ新しいキュレートされたテキスト分類ベンチマークであるAlleNoiseを提示する。
ノイズの分布は、主要なeコマースマーケットプレースの実際のユーザから来ており、人間のミスの意味を現実的に反映している。
このような実環境騒音に対処するには,雑音ラベルを用いた学習方法の代表的選択が不十分であることを示す。
論文 参考訳(メタデータ) (2024-06-24T09:29:14Z) - Neighborhood Collective Estimation for Noisy Label Identification and
Correction [92.20697827784426]
ノイズラベルを用いた学習(LNL)は,ノイズラベルに対するモデルオーバーフィットの効果を軽減し,モデル性能と一般化を改善するための戦略を設計することを目的としている。
近年の進歩は、個々のサンプルのラベル分布を予測し、ノイズ検証とノイズラベル補正を行い、容易に確認バイアスを生じさせる。
提案手法では, 候補サンプルの予測信頼性を, 特徴空間近傍と対比することにより再推定する。
論文 参考訳(メタデータ) (2022-08-05T14:47:22Z) - Robustness to Label Noise Depends on the Shape of the Noise Distribution
in Feature Space [6.748225062396441]
騒音分布の規模と形状が後部確率に影響を及ぼすことを示す。
雑音分布が決定境界を目標とする場合、小さなノイズであっても、分類ロバスト性は低下しうることを示す。
論文 参考訳(メタデータ) (2022-06-02T15:41:59Z) - Learning with Noisy Labels Revisited: A Study Using Real-World Human
Annotations [54.400167806154535]
ノイズラベルを用いた学習に関する既存の研究は、主に合成ラベルノイズに焦点を当てている。
本研究は2つの新しいベンチマークデータセット(CIFAR-10N, CIFAR-100N)を示す。
実世界のノイズラベルは古典的に採用されたクラス依存のラベルではなく、インスタンス依存のパターンに従うことを示す。
論文 参考訳(メタデータ) (2021-10-22T22:42:11Z) - Training Classifiers that are Universally Robust to All Label Noise
Levels [91.13870793906968]
ディープニューラルネットワークは、ラベルノイズの存在下で過度に適合する傾向がある。
ポジティヴ・アンラベルラーニングの新たなサブカテゴリを取り入れた蒸留ベースのフレームワークを提案する。
我々の枠組みは概して中~高騒音レベルにおいて優れています。
論文 参考訳(メタデータ) (2021-05-27T13:49:31Z) - Learning with Feature-Dependent Label Noise: A Progressive Approach [19.425199841491246]
一般的なi.i.dよりもはるかに一般的である特徴依存ラベルノイズの新しいファミリーを提案する。
ラベルノイズ。
我々は、様々な(未知)ノイズパターンに対して、この戦略で訓練された分類器がベイズ分類器と一致するように収束することを示す理論的保証を提供する。
論文 参考訳(メタデータ) (2021-03-13T17:34:22Z) - Tackling Instance-Dependent Label Noise via a Universal Probabilistic
Model [80.91927573604438]
本稿では,ノイズラベルをインスタンスに明示的に関連付ける,単純かつ普遍的な確率モデルを提案する。
合成および実世界のラベルノイズを用いたデータセット実験により,提案手法がロバスト性に大きな改善をもたらすことを確認した。
論文 参考訳(メタデータ) (2021-01-14T05:43:51Z) - A Second-Order Approach to Learning with Instance-Dependent Label Noise [58.555527517928596]
ラベルノイズの存在は、しばしばディープニューラルネットワークのトレーニングを誤解させる。
人間による注釈付きラベルのエラーは、タスクの難易度レベルに依存する可能性が高いことを示しています。
論文 参考訳(メタデータ) (2020-12-22T06:36:58Z) - Extended T: Learning with Mixed Closed-set and Open-set Noisy Labels [86.5943044285146]
ラベルノイズ遷移行列$T$は、真のラベルがノイズのあるものへと反転する確率を反映する。
本稿では,閉集合と開集合の混在したラベル雑音下での学習に着目した。
本手法は,従来の最先端のラベル雑音学習法よりも頑健な性能を追求し,混合ラベル雑音をモデル化する。
論文 参考訳(メタデータ) (2020-12-02T02:42:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。