論文の概要: Uncertainty-Aware Semi-Supervised Few Shot Segmentation
- arxiv url: http://arxiv.org/abs/2110.08954v1
- Date: Mon, 18 Oct 2021 00:37:46 GMT
- ステータス: 処理完了
- システム内更新日: 2021-10-20 07:17:17.596784
- Title: Uncertainty-Aware Semi-Supervised Few Shot Segmentation
- Title(参考訳): 不確実性を考慮した半監督型ショットセグメンテーション
- Authors: Soopil Kim, Philip Chikontwe, Sang Hyun Park
- Abstract要約: 少ないショットセグメンテーション(FSS)は、いくつかのアノテーション付きサポートサンプルを使用して、クエリ画像中の対象オブジェクトのピクセルレベルの分類を学習することを目的としている。
これは、ターゲットオブジェクトの外観のバリエーションをモデル化し、クエリとサポートイメージの間の多様な視覚的手がかりを限られた情報で表現する必要があるため、難しい。
本研究では,不確実性のあるラベル付き画像から新たなプロトタイプを活用できる半教師付きFSS戦略を提案する。
- 参考スコア(独自算出の注目度): 9.098329723771116
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Few shot segmentation (FSS) aims to learn pixel-level classification of a
target object in a query image using only a few annotated support samples. This
is challenging as it requires modeling appearance variations of target objects
and the diverse visual cues between query and support images with limited
information. To address this problem, we propose a semi-supervised FSS strategy
that leverages additional prototypes from unlabeled images with uncertainty
guided pseudo label refinement. To obtain reliable prototypes from unlabeled
images, we meta-train a neural network to jointly predict segmentation and
estimate the uncertainty of predictions. We employ the uncertainty estimates to
exclude predictions with high degrees of uncertainty for pseudo label
construction to obtain additional prototypes based on the refined pseudo
labels. During inference, query segmentation is predicted using prototypes from
both support and unlabeled images including low-level features of the query
images. Our approach is end-to-end and can easily supplement existing
approaches without the requirement of additional training to employ unlabeled
samples. Extensive experiments on PASCAL-$5^i$ and COCO-$20^i$ demonstrate that
our model can effectively remove unreliable predictions to refine pseudo labels
and significantly improve upon state-of-the-art performances.
- Abstract(参考訳): 少ないショットセグメンテーション(FSS)は、いくつかのアノテーション付きサポートサンプルを使用して、クエリ画像中の対象オブジェクトのピクセルレベルの分類を学習することを目的としている。
これは、ターゲットオブジェクトの外観のバリエーションと、限られた情報でクエリーとサポート画像の間の様々な視覚的な手がかりをモデル化する必要があるため、困難である。
この問題に対処するために,不確実性にガイドされた擬似ラベルリファインメントを備えたラベル付き画像から,新たなプロトタイプを活用する半教師付きFSS戦略を提案する。
ラベルのない画像から信頼できるプロトタイプを得るため、ニューラルネットワークをメタトレーニングし、セグメンテーションを共同で予測し、予測の不確かさを推定する。
我々は,疑似ラベル構築のための不確実度の高い予測を除外し,改良された疑似ラベルに基づく追加プロトタイプを得るために不確実性推定を用いる。
推論中、クエリのセグメンテーションは、クエリイメージの低レベル機能を含む、サポートとラベルなしイメージの両方のプロトタイプを使用して予測される。
我々のアプローチはエンドツーエンドであり、ラベルなしサンプルを使用するための追加のトレーニングを必要とせずに既存のアプローチを簡単に補うことができる。
PASCAL-$5^i$およびCOCO-$20^i$の大規模な実験により,我々のモデルは疑似ラベルを洗練するための信頼性の低い予測を効果的に除去し,最先端の性能を大幅に向上させることができることを示した。
関連論文リスト
- Virtual Category Learning: A Semi-Supervised Learning Method for Dense
Prediction with Extremely Limited Labels [63.16824565919966]
本稿では,ラベルの修正を伴わずに,混乱したサンプルを積極的に使用することを提案する。
仮想カテゴリー(VC)は、モデルの最適化に安全に貢献できるように、各混乱したサンプルに割り当てられる。
私たちの興味深い発見は、密集した視覚タスクにおけるVC学習の利用に注目しています。
論文 参考訳(メタデータ) (2023-12-02T16:23:52Z) - NP-SemiSeg: When Neural Processes meet Semi-Supervised Semantic
Segmentation [87.50830107535533]
半教師付きセマンティックセグメンテーションでは、トレーニング時にピクセルワイズラベルをラベル付けされていない画像に割り当てる。
モデルによるクラスワイズ確率分布から各画素の擬似ラベルを予測し,半教師付きセマンティックセマンティックセマンティクスへのアプローチ
本研究では,NPを半教師付きセマンティックセグメンテーションに適応させることにより一歩前進し,NP-SemiSegと呼ばれる新しいモデルを実現する。
論文 参考訳(メタデータ) (2023-08-05T12:42:15Z) - Semi-Supervised Learning for hyperspectral images by non parametrically
predicting view assignment [25.198550162904713]
ハイパースペクトル画像(HSI)分類は、画像中のスペクトル情報が高いため、現在、多くの勢いを増している。
近年,ラベル付きサンプルを最小限に抑えたディープラーニングモデルを効果的に訓練するために,ラベル付きサンプルも自己教師付きおよび半教師付き設定で活用されている。
本研究では,半教師付き学習の概念を利用して,モデルの識別的自己教師型事前学習を支援する。
論文 参考訳(メタデータ) (2023-06-19T14:13:56Z) - Ambiguity-Resistant Semi-Supervised Learning for Dense Object Detection [98.66771688028426]
本研究では,一段階検出器のためのAmbiguity-Resistant Semi-supervised Learning (ARSL)を提案する。
擬似ラベルの分類とローカライズ品質を定量化するために,JCE(Joint-Confidence Estimation)を提案する。
ARSLは、曖昧さを効果的に軽減し、MS COCOおよびPASCALVOC上で最先端のSSOD性能を達成する。
論文 参考訳(メタデータ) (2023-03-27T07:46:58Z) - Exploiting Completeness and Uncertainty of Pseudo Labels for Weakly
Supervised Video Anomaly Detection [149.23913018423022]
弱教師付きビデオ異常検出は、ビデオレベルのラベルのみを用いて、ビデオ内の異常事象を特定することを目的としている。
2段階の自己学習法は擬似ラベルの自己生成によって著しく改善されている。
本稿では,自己学習のための完全性と不確実性を利用した強化フレームワークを提案する。
論文 参考訳(メタデータ) (2022-12-08T05:53:53Z) - Semi-supervised Semantic Segmentation with Prototype-based Consistency
Regularization [20.4183741427867]
半教師付きセマンティックセグメンテーションでは、制限された注釈付き画像からラベルなし画像へラベル情報を伝達する必要がある。
このようなピクセルごとの予測タスクの課題は、クラス内の大きなバリエーションである。
本稿では,ラベルの伝搬困難を緩和するために,クラス内特徴の分布を正規化するための新しい手法を提案する。
論文 参考訳(メタデータ) (2022-10-10T01:38:01Z) - Semi-supervised Salient Object Detection with Effective Confidence
Estimation [35.0990691497574]
本研究では,少数のラベル付きサンプルと多数のラベル付きサンプルにアクセス可能な半教師付きサルエント物体検出法について検討した。
本研究では,条件付きエネルギーベースモデルの潜伏変数を用いて,人体給与ラベルの性質をモデル化する。
ラベル付きサンプルは1/16に過ぎず,最先端の完全教師付きモデルと比較して競争性能が向上する。
論文 参考訳(メタデータ) (2021-12-28T07:14:48Z) - Self-Paced Uncertainty Estimation for One-shot Person Re-Identification [9.17071384578203]
本稿では,単発人物の自己ペース不確実性推定ネットワーク(spue-net)を提案する。
自己ペースサンプリング戦略を導入することで,ラベルなしサンプルの擬似ラベルを反復的に推定し,ラベル付きサンプルを拡張できる。
さらに,局所不確実性推定と決定性推定を併用した協調学習手法を適用し,より優れた隠れ空間特徴抽出を実現する。
論文 参考訳(メタデータ) (2021-04-19T09:20:30Z) - Semi-Supervised Domain Adaptation with Prototypical Alignment and
Consistency Learning [86.6929930921905]
本稿では,いくつかの対象サンプルがラベル付けされていれば,ドメインシフトに対処するのにどの程度役立つか検討する。
ランドマークの可能性を最大限に追求するために、ランドマークから各クラスのターゲットプロトタイプを計算するプロトタイプアライメント(PA)モジュールを組み込んでいます。
具体的には,ラベル付き画像に深刻な摂動を生じさせ,PAを非自明にし,モデル一般化性を促進する。
論文 参考訳(メタデータ) (2021-04-19T08:46:08Z) - Utilizing Uncertainty Estimation in Deep Learning Segmentation of
Fluorescence Microscopy Images with Missing Markers [7.812710681134931]
蛍光顕微鏡画像には複数のチャネルが含まれており、それぞれがサンプルを染色するマーカーを示している。
ディープラーニングベースのセグメンテーションモデルの適用は困難であり、すべてのトレーニングサンプルと将来のアプリケーションに対する推論において、事前に定義されたチャネルの組み合わせが期待できる。
画像セグメンテーションのための畳み込みニューラルネットワークのアレター的およびエピステマティックな不確かさを推定し, (i) 対応するセグメンテーション指標への回帰による不確実性特徴の解釈のためのランダムフォレストモデルを訓練することにより, ラベル付き画像のセグメンテーション品質を推定する方法を提案する。
論文 参考訳(メタデータ) (2021-01-27T15:06:04Z) - Minimax Active Learning [61.729667575374606]
アクティブラーニングは、人間のアノテーションによってラベル付けされる最も代表的なサンプルをクエリすることによって、ラベル効率の高いアルゴリズムを開発することを目指している。
現在のアクティブラーニング技術は、最も不確実なサンプルを選択するためにモデルの不確実性に頼るか、クラスタリングを使うか、最も多様なラベルのないサンプルを選択するために再構築する。
我々は,不確実性と多様性を両立させる半教師付きミニマックスエントロピーに基づく能動学習アルゴリズムを開発した。
論文 参考訳(メタデータ) (2020-12-18T19:03:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。