論文の概要: SemiNLL: A Framework of Noisy-Label Learning by Semi-Supervised Learning
- arxiv url: http://arxiv.org/abs/2012.00925v1
- Date: Wed, 2 Dec 2020 01:49:47 GMT
- ステータス: 処理完了
- システム内更新日: 2021-05-25 04:10:34.131965
- Title: SemiNLL: A Framework of Noisy-Label Learning by Semi-Supervised Learning
- Title(参考訳): SemiNLL:半監督学習による雑音ラベル学習フレームワーク
- Authors: Zhuowei Wang, Jing Jiang, Bo Han, Lei Feng, Bo An, Gang Niu, Guodong
Long
- Abstract要約: SemiNLLはSS戦略とSSLモデルをエンドツーエンドで組み合わせた汎用フレームワークである。
我々のフレームワークは、様々なSS戦略やSSLバックボーンを吸収し、そのパワーを利用して有望なパフォーマンスを実現する。
- 参考スコア(独自算出の注目度): 58.26384597768118
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Deep learning with noisy labels is a challenging task. Recent prominent
methods that build on a specific sample selection (SS) strategy and a specific
semi-supervised learning (SSL) model achieved state-of-the-art performance.
Intuitively, better performance could be achieved if stronger SS strategies and
SSL models are employed. Following this intuition, one might easily derive
various effective noisy-label learning methods using different combinations of
SS strategies and SSL models, which is, however, reinventing the wheel in
essence. To prevent this problem, we propose SemiNLL, a versatile framework
that combines SS strategies and SSL models in an end-to-end manner. Our
framework can absorb various SS strategies and SSL backbones, utilizing their
power to achieve promising performance. We also instantiate our framework with
different combinations, which set the new state of the art on
benchmark-simulated and real-world datasets with noisy labels.
- Abstract(参考訳): ノイズの多いラベルによるディープラーニングは難しい課題です。
特定のサンプル選択(SS)戦略と特定の半教師付き学習(SSL)モデルに基づく最近の顕著な手法は、最先端のパフォーマンスを達成した。
直感的には、より強力なSS戦略とSSLモデルを採用するとパフォーマンスが向上する。
この直感に従って、SS戦略とSSLモデルの異なる組み合わせを用いて、様々な効果的な雑音ラベル学習法を容易に導き出すことができる。
この問題を解決するために,SS戦略とSSLモデルをエンドツーエンドで組み合わせた汎用フレームワークであるSemiNLLを提案する。
我々のフレームワークは様々なss戦略とsslバックボーンを吸収でき、その能力を利用して有望なパフォーマンスを実現します。
ベンチマークをシミュレートしたデータセットや,ノイズの多いラベル付きの実世界のデータセットに新たな最先端を設定するために,さまざまな組み合わせでフレームワークをインスタンス化しています。
関連論文リスト
- Erasing the Bias: Fine-Tuning Foundation Models for Semi-Supervised Learning [4.137391543972184]
半教師付き学習(SSL)は目覚ましい進歩をみせており、多くの方法のバリエーションをもたらしている。
本稿では,FinSSLという新しいSSLアプローチを提案する。
我々は、FineSSLが複数のベンチマークデータセットにSSLの新たな状態を設定し、トレーニングコストを6倍以上削減し、さまざまな微調整と現代的なSSLアルゴリズムをシームレスに統合できることを実証した。
論文 参考訳(メタデータ) (2024-05-20T03:33:12Z) - Improving Representation Learning for Histopathologic Images with
Cluster Constraints [31.426157660880673]
自己教師型学習(SSL)事前学習戦略が,現実的な代替手段として浮上している。
転送可能な表現学習と意味的に意味のあるクラスタリングのためのSSLフレームワークを導入する。
我々の手法は、下流の分類やクラスタリングタスクにおいて一般的なSSLメソッドよりも優れています。
論文 参考訳(メタデータ) (2023-10-18T21:20:44Z) - Semi-Supervised Learning in the Few-Shot Zero-Shot Scenario [14.916971861796384]
Semi-Supervised Learning (SSL)は、ラベル付きデータとラベルなしデータの両方を利用して、モデルのパフォーマンスを向上させるフレームワークである。
既存のSSLメソッドを拡張し、特定のクラスが欠落している状況に対処するための一般的なアプローチを提案する。
実験の結果,最先端のSSL,オープンセットのSSL,オープンワールドのSSLメソッドと比較して,精度が大幅に向上した。
論文 参考訳(メタデータ) (2023-08-27T14:25:07Z) - Collaborative Intelligence Orchestration: Inconsistency-Based Fusion of
Semi-Supervised Learning and Active Learning [60.26659373318915]
アクティブラーニング(AL)と半教師付きラーニング(SSL)は2つの効果があるが、しばしば孤立している。
本稿では、SSL-ALの潜在的な優位性をさらに調査するために、革新的な一貫性に基づく仮想aDvErialアルゴリズムを提案する。
2つの実世界のケーススタディは、提案したデータサンプリングアルゴリズムの適用と展開の実践的な産業価値を可視化する。
論文 参考訳(メタデータ) (2022-06-07T13:28:43Z) - A Strong Baseline for Semi-Supervised Incremental Few-Shot Learning [54.617688468341704]
少ないショット学習は、限られたトレーニングサンプルを持つ新しいクラスに一般化するモデルを学ぶことを目的としている。
本研究では,(1)信頼できない擬似ラベルによる基本クラスと新クラスのあいまいさを緩和する高度に設計されたメタトレーニングアルゴリズム,(2)ラベルの少ないデータとラベルなしデータを用いて基礎知識を保ちながら,新クラスの識別的特徴を学習するモデル適応機構を提案する。
論文 参考訳(メタデータ) (2021-10-21T13:25:52Z) - Self-Supervised Learning of Graph Neural Networks: A Unified Review [50.71341657322391]
ラベルなしサンプルを多用する新たなパラダイムとして,自己教師型学習が登場している。
SSLを用いたグラフニューラルネットワーク(GNNs)のトレーニング方法の統一レビューを提供します。
gnnに対するssl手法の処理は,様々な手法の類似性と相違に光を当て,新しい手法やアルゴリズムの開発段階を定めている。
論文 参考訳(メタデータ) (2021-02-22T03:43:45Z) - CSS-LM: A Contrastive Framework for Semi-supervised Fine-tuning of
Pre-trained Language Models [59.49705076369856]
プレトレーニング言語モデル(PLM)の微調整フェーズを改善するための新しいフレームワークを提案する。
大規模未ラベルコーパスから,タスクに対するドメインレベルおよびクラスレベルの意味的関連性に応じて,正および負のインスタンスを検索する。
次に、検索したラベル付きおよびオリジナルラベル付きの両方のインスタンスに対して、対照的な半教師付き学習を行い、PLMが重要なタスク関連セマンティックな特徴をキャプチャするのを助ける。
論文 参考訳(メタデータ) (2021-02-07T09:27:26Z) - On Data-Augmentation and Consistency-Based Semi-Supervised Learning [77.57285768500225]
最近提案された整合性に基づく半教師付き学習(SSL)手法は,複数のSSLタスクにおいて最先端技術である。
これらの進歩にもかかわらず、これらの手法の理解はまだ比較的限られている。
論文 参考訳(メタデータ) (2021-01-18T10:12:31Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。