論文の概要: Instance-Dependent Label-Noise Learning with Manifold-Regularized
Transition Matrix Estimation
- arxiv url: http://arxiv.org/abs/2206.02791v1
- Date: Mon, 6 Jun 2022 04:12:01 GMT
- ステータス: 処理完了
- システム内更新日: 2022-06-08 14:53:21.766828
- Title: Instance-Dependent Label-Noise Learning with Manifold-Regularized
Transition Matrix Estimation
- Title(参考訳): 多様体正規化遷移行列推定によるインスタンス依存ラベルノイズ学習
- Authors: De Cheng, Tongliang Liu, Yixiong Ning, Nannan Wang, Bo Han, Gang Niu,
Xinbo Gao, Masashi Sugiyama
- Abstract要約: 遷移行列 T(x) は、インスタンス依存ノイズ(IDN)の下では特定できない
我々は、T(x) の幾何学について、「より近い2つのインスタンスは、それに対応する遷移行列がより類似している」という仮定を提案する。
本手法は,難解なIDNの下でのラベルノイズ学習において,最先端の手法よりも優れている。
- 参考スコア(独自算出の注目度): 172.81824511381984
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In label-noise learning, estimating the transition matrix has attracted more
and more attention as the matrix plays an important role in building
statistically consistent classifiers. However, it is very challenging to
estimate the transition matrix T(x), where x denotes the instance, because it
is unidentifiable under the instance-dependent noise(IDN). To address this
problem, we have noticed that, there are psychological and physiological
evidences showing that we humans are more likely to annotate instances of
similar appearances to the same classes, and thus poor-quality or ambiguous
instances of similar appearances are easier to be mislabeled to the correlated
or same noisy classes. Therefore, we propose assumption on the geometry of T(x)
that "the closer two instances are, the more similar their corresponding
transition matrices should be". More specifically, we formulate above
assumption into the manifold embedding, to effectively reduce the degree of
freedom of T(x) and make it stably estimable in practice. The proposed
manifold-regularized technique works by directly reducing the estimation error
without hurting the approximation error about the estimation problem of T(x).
Experimental evaluations on four synthetic and two real-world datasets
demonstrate that our method is superior to state-of-the-art approaches for
label-noise learning under the challenging IDN.
- Abstract(参考訳): ラベルノイズ学習では、統計的に一貫した分類器を構築する上で、行列が重要な役割を果たすため、遷移行列の推定がますます注目されている。
しかし、x がインスタンスを表す遷移行列 T(x) を推定するのは非常に困難である。
この問題に対処するために、人間は同一のクラスに類似した出現例を注釈する傾向が強く、類似した出現例の質の悪い例や曖昧な例は、関連性または同一のノイズクラスと誤記することがより容易であることを示す心理学的・生理学的証拠があることに気づいた。
したがって、T(x) の幾何について、「より近い2つのインスタンスはよりよく似た遷移行列である」という仮定を提案する。
具体的には、上記の仮定を多様体埋め込みに定式化し、T(x) の自由度を効果的に減らし、実際に安定に推定できるようにする。
提案手法は,T(x)の推定問題に対する近似誤差を損なうことなく,直接推定誤差を削減する。
4つの合成データセットと2つの実世界のデータセットに関する実験的評価は、挑戦的なidnの下でラベルノイズ学習のための最先端のアプローチよりも優れていることを示している。
関連論文リスト
- Multi-Label Noise Transition Matrix Estimation with Label Correlations:
Theory and Algorithm [73.94839250910977]
ノイズの多いマルチラベル学習は、大規模な正確なラベルの収集によって生じる課題により、注目を集めている。
遷移行列の導入は、マルチラベルノイズをモデル化し、統計的に一貫したアルゴリズムの開発に役立つ。
そこで本稿では, アンカーポイントを必要とせずに, ラベル相関を利用した新しい推定器を提案する。
論文 参考訳(メタデータ) (2023-09-22T08:35:38Z) - Learning Noise Transition Matrix from Only Noisy Labels via Total
Variation Regularization [88.91872713134342]
本稿では,雑音遷移行列を推定し,同時に分類器を学習する理論的基礎付け手法を提案する。
提案手法の有効性を,ベンチマークおよび実世界のデータセットを用いた実験により示す。
論文 参考訳(メタデータ) (2021-02-04T05:09:18Z) - Provably End-to-end Label-Noise Learning without Anchor Points [118.97592870124937]
本稿では,アンカーポイントを使わずにラベルノイズ学習を実現するためのエンドツーエンドフレームワークを提案する。
提案フレームワークでは,クリーンなクラス後確率が十分に分散している場合,遷移行列を同定できる。
論文 参考訳(メタデータ) (2021-02-04T03:59:37Z) - Dual T: Reducing Estimation Error for Transition Matrix in Label-noise
Learning [157.2709657207203]
遷移行列を推定する既存の方法は、ノイズのあるクラス後部を推定することに大きく依存している。
雑音のクラス後部を直接推定するのを避けるために中間クラスを導入する。
この中間クラスにより、元の遷移行列は2つの容易に推定できる遷移行列の積に分解できる。
論文 参考訳(メタデータ) (2020-06-14T05:48:20Z) - Meta Transition Adaptation for Robust Deep Learning with Noisy Labels [61.8970957519509]
本研究では,新しいメタ遷移学習戦略を提案する。
具体的には、クリーンなラベル付きメタデータの小さなセットのサウンドガイダンスにより、ノイズ遷移行列と分類器パラメータを相互に改善することができる。
本手法は, 従来技術よりも頑健な性能で, 遷移行列をより正確に抽出することができる。
論文 参考訳(メタデータ) (2020-06-10T07:27:25Z) - A Practical Framework for Relation Extraction with Noisy Labels Based on
Doubly Transitional Loss [14.121872633596452]
自動ラベリングのための実践的なエンドツーエンドのディープラーニングフレームワークを提案する。
1つの遷移は、隠れた層間の非線形変換によってパラメータ化される。
もう1つは、ラベル間の直接変換をキャプチャする明示的な確率遷移行列である。
論文 参考訳(メタデータ) (2020-04-28T19:38:20Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。