論文の概要: Barely-Supervised Learning: Semi-Supervised Learning with very few
labeled images
- arxiv url: http://arxiv.org/abs/2112.12004v1
- Date: Wed, 22 Dec 2021 16:29:10 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-23 15:23:04.940085
- Title: Barely-Supervised Learning: Semi-Supervised Learning with very few
labeled images
- Title(参考訳): Barely Supervised Learning: ラベル付き画像の少ない半スーパービジョンラーニング
- Authors: Thomas Lucas and Philippe Weinzaepfel and Gregory Rogez
- Abstract要約: 我々は、画像の弱い拡張バージョンに依存して監視信号を得る、最先端の半教師方式 FixMatch の振舞いを深く分析する。
疑似ラベルを高い信頼性で予測できない場合、トレーニング信号の欠如により、ほとんど監督されていないシナリオで頻繁に失敗することを示す。
本研究では,自信ある擬似ラベルが存在しない状態でのトレーニング信号を提供する自己教師型手法を活用する手法を提案する。
- 参考スコア(独自算出の注目度): 16.905389887406894
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: This paper tackles the problem of semi-supervised learning when the set of
labeled samples is limited to a small number of images per class, typically
less than 10, problem that we refer to as barely-supervised learning. We
analyze in depth the behavior of a state-of-the-art semi-supervised method,
FixMatch, which relies on a weakly-augmented version of an image to obtain
supervision signal for a more strongly-augmented version. We show that it
frequently fails in barely-supervised scenarios, due to a lack of training
signal when no pseudo-label can be predicted with high confidence. We propose a
method to leverage self-supervised methods that provides training signal in the
absence of confident pseudo-labels. We then propose two methods to refine the
pseudo-label selection process which lead to further improvements. The first
one relies on a per-sample history of the model predictions, akin to a voting
scheme. The second iteratively updates class-dependent confidence thresholds to
better explore classes that are under-represented in the pseudo-labels. Our
experiments show that our approach performs significantly better on STL-10 in
the barely-supervised regime, e.g. with 4 or 8 labeled images per class.
- Abstract(参考訳): 本稿では,ラベル付きサンプルの集合がクラス毎に少数の画像に制限されている場合,通常は10未満で,半教師付き学習の課題に対処する。
画像の弱弱化バージョンに依存する,最先端の半教師付き手法であるfixmatchの挙動を詳細に解析し,より強弱化バージョンに対する監督信号を得る。
疑似ラベルを高い信頼度で予測できない場合、トレーニング信号の欠如により、ほとんど教師なしのシナリオでは頻繁に失敗する。
本稿では,自信のある疑似ラベルがない場合に訓練信号を提供する自己教師あり手法の活用法を提案する。
次に,疑似ラベル選択プロセスを洗練するための2つの方法を提案する。
1つ目は、投票方式に似たモデル予測のサンプルごとの履歴に依存している。
第2の繰り返しは、クラス依存の信頼しきい値を更新して、擬似ラベルで表現されていないクラスをよりよく探索する。
実験の結果,stl-10では,クラスごとに4~8枚のラベル付き画像が有意な効果を示した。
関連論文リスト
- Uncertainty-aware Sampling for Long-tailed Semi-supervised Learning [89.98353600316285]
擬似ラベルサンプリングのモデル化プロセスに不確実性を導入し、各クラスにおけるモデル性能が異なる訓練段階によって異なることを考慮した。
このアプローチにより、モデルは異なる訓練段階における擬似ラベルの不確かさを認識でき、それによって異なるクラスの選択閾値を適応的に調整できる。
FixMatchのような他の手法と比較して、UDTSは自然シーン画像データセットの精度を少なくとも5.26%、1.75%、9.96%、1.28%向上させる。
論文 参考訳(メタデータ) (2024-01-09T08:59:39Z) - One-bit Supervision for Image Classification: Problem, Solution, and
Beyond [114.95815360508395]
本稿では,ラベルの少ない新しい学習環境である,画像分類のための1ビット監督について述べる。
多段階学習パラダイムを提案し、負ラベル抑圧を半教師付き半教師付き学習アルゴリズムに組み込む。
複数のベンチマークにおいて、提案手法の学習効率は、フルビットの半教師付き監視手法よりも優れている。
論文 参考訳(メタデータ) (2023-11-26T07:39:00Z) - Boosting Semi-Supervised Learning by bridging high and low-confidence
predictions [4.18804572788063]
Pseudo-labelingは半教師あり学習(SSL)において重要な技術である
ReFixMatchと呼ばれる新しい手法を提案し、これはトレーニング中にラベルなしのデータをすべて活用することを目的としている。
論文 参考訳(メタデータ) (2023-08-15T00:27:18Z) - Shrinking Class Space for Enhanced Certainty in Semi-Supervised Learning [59.44422468242455]
そこで我々はShrinkMatchと呼ばれる新しい手法を提案し、不確実なサンプルを学習する。
それぞれの不確実なサンプルに対して、元の Top-1 クラスを単に含むスランク類空間を適応的に求める。
次に、スランク空間における強と弱に強化された2つのサンプル間の整合正則化を課し、識別的表現を試みます。
論文 参考訳(メタデータ) (2023-08-13T14:05:24Z) - Pseudo-Label Noise Suppression Techniques for Semi-Supervised Semantic
Segmentation [21.163070161951868]
半消費学習(SSL)は、教師なしデータをトレーニングに組み込むことで、大きなラベル付きデータセットの必要性を減らすことができる。
現在のSSLアプローチでは、初期教師付きトレーニングモデルを使用して、擬似ラベルと呼ばれる未ラベル画像の予測を生成する。
擬似ラベルノイズと誤りを3つのメカニズムで制御する。
論文 参考訳(メタデータ) (2022-10-19T09:46:27Z) - Two-phase Pseudo Label Densification for Self-training based Domain
Adaptation [93.03265290594278]
TPLDと呼ばれる,新規な二相擬似ラベル高密度化フレームワークを提案する。
第1フェーズでは,スライディングウインドウ投票を用いて,画像内の内在的空間相関を利用して,自信のある予測を広める。
第2フェーズでは,信頼度に基づく容易な分類を行う。
トレーニングプロセスの容易化と騒音予測の回避を目的として,ブートストラップ機構の導入を行った。
論文 参考訳(メタデータ) (2020-12-09T02:35:25Z) - An Empirical Study of the Collapsing Problem in Semi-Supervised 2D Human
Pose Estimation [80.02124918255059]
半教師付き学習は、ラベルなし画像の探索によってモデルの精度を高めることを目的としている。
私たちは相互に教え合うために2つのネットワークを学びます。
各ネットワーク内の容易なイメージに関するより信頼性の高い予測は、他のネットワークに対応するハードイメージについて学ぶように教えるために使用される。
論文 参考訳(メタデータ) (2020-11-25T03:29:52Z) - One-bit Supervision for Image Classification [121.87598671087494]
1ビットの監視は、不完全なアノテーションから学ぶための新しい設定である。
負ラベル抑圧を既成の半教師付き学習アルゴリズムに組み込んだ多段階学習パラダイムを提案する。
論文 参考訳(メタデータ) (2020-09-14T03:06:23Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。