論文の概要: GuidedMix-Net: Learning to Improve Pseudo Masks Using Labeled Images as
Reference
- arxiv url: http://arxiv.org/abs/2106.15064v2
- Date: Wed, 30 Jun 2021 05:25:21 GMT
- ステータス: 処理完了
- システム内更新日: 2021-07-01 12:43:25.413541
- Title: GuidedMix-Net: Learning to Improve Pseudo Masks Using Labeled Images as
Reference
- Title(参考訳): GuidedMix-Net:ラベル付き画像を参照して擬似マスクを改善する学習
- Authors: Peng Tu, Yawen Huang, Rongrong Ji, Feng Zheng, Ling Shao
- Abstract要約: 半教師付きセマンティックセマンティックセグメンテーションのための新しい手法である GuidedMix-Net を提案する。
まず、ラベル付きデータとラベルなしデータの間に特徴アライメントの目的を導入し、類似した画像対をキャプチャする。
MITransは、ラベルなしデータのさらなるプログレッシブな精細化のための強力な知識モジュールであることが示されている。
ラベル付きデータに対する教師付き学習とともに、ラベル付きデータの予測が生成した擬似マスクとともに学習される。
- 参考スコア(独自算出の注目度): 153.354332374204
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Semi-supervised learning is a challenging problem which aims to construct a
model by learning from a limited number of labeled examples. Numerous methods
have been proposed to tackle this problem, with most focusing on utilizing the
predictions of unlabeled instances consistency alone to regularize networks.
However, treating labeled and unlabeled data separately often leads to the
discarding of mass prior knowledge learned from the labeled examples, and
failure to mine the feature interaction between the labeled and unlabeled image
pairs. In this paper, we propose a novel method for semi-supervised semantic
segmentation named GuidedMix-Net, by leveraging labeled information to guide
the learning of unlabeled instances. Specifically, we first introduce a feature
alignment objective between labeled and unlabeled data to capture potentially
similar image pairs and then generate mixed inputs from them. The proposed
mutual information transfer (MITrans), based on the cluster assumption, is
shown to be a powerful knowledge module for further progressive refining
features of unlabeled data in the mixed data space. To take advantage of the
labeled examples and guide unlabeled data learning, we further propose a mask
generation module to generate high-quality pseudo masks for the unlabeled data.
Along with supervised learning for labeled data, the prediction of unlabeled
data is jointly learned with the generated pseudo masks from the mixed data.
Extensive experiments on PASCAL VOC 2012, PASCAL-Context and Cityscapes
demonstrate the effectiveness of our GuidedMix-Net, which achieves competitive
segmentation accuracy and significantly improves the mIoU by +7$\%$ compared to
previous state-of-the-art approaches.
- Abstract(参考訳): 半教師付き学習は、限られた数のラベル付き例から学習することでモデルを構築することを目的とした課題である。
この問題に取り組むために多くの方法が提案されており、ほとんどがネットワークを正規化するためにラベルなしインスタンス一貫性の予測を活用することに重点を置いている。
しかし、ラベル付きとラベルなしのデータを別々に扱うと、ラベル付き例から学んだ大量の事前知識が破棄され、ラベル付きとラベルなしの画像ペア間の特徴的相互作用を掘り起こせなくなることが多い。
本稿では,ラベルなしインスタンスの学習を指導するためにラベル付き情報を活用することで,半教師付き意味セグメンテーションのための新しい手法であるguidedmix-netを提案する。
具体的には,ラベル付きデータとラベル付きデータとの間の特徴アライメント目標を導入し,類似する画像ペアをキャプチャし,それらから混合入力を生成する。
クラスタ仮定に基づく相互情報伝達 (MITrans) は, 混合データ空間におけるラベルなしデータのより高度な精細化のための強力な知識モジュールであることが示されている。
ラベル付きサンプルを利用してラベルなしデータ学習をガイドするために,ラベルなしデータに対して高品質な擬似マスクを生成するマスク生成モジュールを提案する。
ラベル付きデータの教師付き学習とともに、ラベルなしデータの予測を混合データから生成された擬似マスクと共同で学習する。
PASCAL VOC 2012において,PASCAL-ContextとCityscapesの広範な実験により,競争的セグメンテーション精度を実現し,mIoUを従来の最先端アプローチに比べて+7$\%大幅に改善した GuidedMix-Netの有効性が示された。
関連論文リスト
- Semi-Supervised Learning of Semantic Correspondence with Pseudo-Labels [26.542718087103665]
SemiMatchは意味論的に類似した画像間の密接な対応を確立するための半教師付きソリューションである。
筆者らのフレームワークは,ソースと弱増強ターゲット間のモデル予測自体を用いて擬似ラベルを生成し,擬似ラベルを用いてソースと強増強ターゲット間のモデルの再学習を行う。
実験では、SemiMatchは様々なベンチマーク、特にPF-Willowにおける最先端のパフォーマンスを大きなマージンで達成している。
論文 参考訳(メタデータ) (2022-03-30T03:52:50Z) - GuidedMix-Net: Semi-supervised Semantic Segmentation by Using Labeled
Images as Reference [90.5402652758316]
半教師付きセマンティックセマンティックセグメンテーションのための新しい手法である GuidedMix-Net を提案する。
ラベル付き情報を使用して、ラベルなしのインスタンスの学習をガイドする。
競合セグメンテーションの精度を達成し、mIoUを以前のアプローチに比べて+7$%大きく改善する。
論文 参考訳(メタデータ) (2021-12-28T06:48:03Z) - OpenCoS: Contrastive Semi-supervised Learning for Handling Open-set
Unlabeled Data [65.19205979542305]
ラベル付けされていないデータには、実際にはクラス外のサンプルが含まれる。
OpenCoSは、このリアルな半教師付き学習シナリオを扱う方法である。
論文 参考訳(メタデータ) (2021-06-29T06:10:05Z) - Adversarial Knowledge Transfer from Unlabeled Data [62.97253639100014]
本稿では,インターネット規模の未ラベルデータから知識を伝達し,分類器の性能を向上させるための新しいAdversarial Knowledge Transferフレームワークを提案する。
我々の手法の重要な新しい側面は、ラベル付けされていないソースデータは、ラベル付けされたターゲットデータと異なるクラスであることができ、個別のプリテキストタスクを定義する必要がないことである。
論文 参考訳(メタデータ) (2020-08-13T08:04:27Z) - OpenMix: Reviving Known Knowledge for Discovering Novel Visual
Categories in An Open World [127.64076228829606]
オープンセットからのラベルなし例と既知のクラスからのラベル付き例を混合するために、OpenMixを導入します。
OpenMixは、間違った擬似ラベルで割り当てられる可能性のあるラベルのないサンプルに対して、モデルが過度に適合することを防ぐのに役立つ。
論文 参考訳(メタデータ) (2020-04-12T05:52:39Z) - Automatically Discovering and Learning New Visual Categories with
Ranking Statistics [145.89790963544314]
我々は,他のクラスをラベル付けした画像コレクションにおいて,新しいクラスを発見する問題に対処する。
汎用クラスタリングモデルを学び、後者を用いて、非競合データ中の新しいクラスを識別する。
我々は,標準分類ベンチマークに対するアプローチと,新しいカテゴリー発見法の性能を,有意なマージンで評価した。
論文 参考訳(メタデータ) (2020-02-13T18:53:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。