論文の概要: Prior Guided Feature Enrichment Network for Few-Shot Segmentation
- arxiv url: http://arxiv.org/abs/2008.01449v1
- Date: Tue, 4 Aug 2020 10:41:32 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-03 00:31:37.110351
- Title: Prior Guided Feature Enrichment Network for Few-Shot Segmentation
- Title(参考訳): Few-Shotセグメンテーションのための事前案内機能強化ネットワーク
- Authors: Zhuotao Tian, Hengshuang Zhao, Michelle Shu, Zhicheng Yang, Ruiyu Li,
Jiaya Jia
- Abstract要約: 最先端のセマンティックセグメンテーション手法は、良い結果を得るために十分なラベル付きデータを必要とする。
少数のラベル付きサポートサンプルを持つ新しいクラスに迅速に適応するモデルを学習することで,この問題に対処するためのショットセグメンテーションが提案されている。
これらのフレームワークは、高レベルのセマンティック情報の不適切な使用により、目に見えないクラスにおける一般化能力の低下という課題に直面している。
- 参考スコア(独自算出の注目度): 64.91560451900125
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: State-of-the-art semantic segmentation methods require sufficient labeled
data to achieve good results and hardly work on unseen classes without
fine-tuning. Few-shot segmentation is thus proposed to tackle this problem by
learning a model that quickly adapts to new classes with a few labeled support
samples. Theses frameworks still face the challenge of generalization ability
reduction on unseen classes due to inappropriate use of high-level semantic
information of training classes and spatial inconsistency between query and
support targets. To alleviate these issues, we propose the Prior Guided Feature
Enrichment Network (PFENet). It consists of novel designs of (1) a
training-free prior mask generation method that not only retains generalization
power but also improves model performance and (2) Feature Enrichment Module
(FEM) that overcomes spatial inconsistency by adaptively enriching query
features with support features and prior masks. Extensive experiments on
PASCAL-5$^i$ and COCO prove that the proposed prior generation method and FEM
both improve the baseline method significantly. Our PFENet also outperforms
state-of-the-art methods by a large margin without efficiency loss. It is
surprising that our model even generalizes to cases without labeled support
samples. Our code is available at https://github.com/Jia-Research-Lab/PFENet/.
- Abstract(参考訳): 最先端のセマンティクスセグメンテーションメソッドは十分な結果を得るために十分なラベル付きデータを必要とし、微調整なしでは見当たらないクラスでは動作しない。
したがって、いくつかのラベル付きサポートサンプルで新しいクラスに迅速に適応するモデルを学ぶことにより、この問題に取り組むために、少数ショットのセグメンテーションが提案されている。
これらのフレームワークは、トレーニングクラスの高レベルなセマンティック情報の使用や、クエリとサポートターゲット間の空間的不整合により、目に見えないクラスに対する一般化能力の低下という課題に直面している。
これらの問題を緩和するため,PFENet(Presideed Guided Feature Enrichment Network)を提案する。
本手法は,(1)一般化能力を保持するだけでなく,モデル性能も向上するトレーニングフリーの先行マスク生成手法と,(2)サポート機能と先行マスクを備えたクエリ機能を適応的に強化することにより,空間的不整合を克服する機能強化モジュール(FEM)からなる。
PASCAL-5$^i$およびCOCOの大規模実験により,提案した先行生成法とFEMの両方がベースライン法を大幅に改善することが確認された。
当社のPFENetは,効率損失を伴わずに,最先端の手法よりも大きなマージンを達成しています。
私たちのモデルがサポートサンプルにラベルをつけずにケースに一般化することさえ驚きです。
私たちのコードはhttps://github.com/jia-research-lab/pfenet/で利用可能です。
関連論文リスト
- UIFormer: A Unified Transformer-based Framework for Incremental Few-Shot Object Detection and Instance Segmentation [38.331860053615955]
本稿では,Transformerアーキテクチャを用いたインクリメンタルな小ショットオブジェクト検出(iFSOD)とインスタンスセグメンテーション(iFSIS)のための新しいフレームワークを提案する。
私たちのゴールは、新しいオブジェクトクラスのいくつかの例しか利用できない状況に対して最適なソリューションを作ることです。
論文 参考訳(メタデータ) (2024-11-13T12:29:44Z) - Memory-guided Network with Uncertainty-based Feature Augmentation for Few-shot Semantic Segmentation [12.653336728447654]
学習可能なメモリベクトルの集合からなるクラス共有メモリ(CSM)モジュールを提案する。
これらのメモリベクトルは、トレーニング中にベースクラスから要素オブジェクトパターンを学習し、トレーニングと推論の両方でクエリ機能を再エンコードする。
我々は、CSMとUFAを代表的FSS作品に統合し、広く使われているPASCAL-5$i$とCOCO-20$i$データセットの実験結果を得た。
論文 参考訳(メタデータ) (2024-06-01T19:53:25Z) - Unsupervised Pre-training with Language-Vision Prompts for Low-Data Instance Segmentation [105.23631749213729]
低データ体制における教師なし事前学習のための新しい手法を提案する。
最近成功したプロンプト技術に触発されて,言語ビジョンプロンプトを用いた教師なし事前学習法を導入した。
提案手法は,低データ方式のCNNモデルよりも高速に収束し,性能がよいことを示す。
論文 参考訳(メタデータ) (2024-05-22T06:48:43Z) - Universal Domain Adaptation from Foundation Models: A Baseline Study [58.51162198585434]
基礎モデルを用いた最先端UniDA手法の実証的研究を行った。
CLIPモデルからターゲット知識を抽出するためのパラメータフリーな手法であるtextitCLIP 蒸留を導入する。
単純な手法ではあるが、ほとんどのベンチマークタスクでは従来の手法よりも優れている。
論文 参考訳(メタデータ) (2023-05-18T16:28:29Z) - Harmonizing Base and Novel Classes: A Class-Contrastive Approach for
Generalized Few-Shot Segmentation [78.74340676536441]
本稿では,プロトタイプの更新を規制し,プロトタイプ間の距離を広くするために,クラス間のコントラスト損失とクラス関係損失を提案する。
提案手法は,PASCAL VOC および MS COCO データセット上での一般化された小ショットセグメンテーションタスクに対して,新しい最先端性能を実現する。
論文 参考訳(メタデータ) (2023-03-24T00:30:25Z) - Boosting Low-Data Instance Segmentation by Unsupervised Pre-training
with Saliency Prompt [103.58323875748427]
この研究は、低データ体制のための新しい教師なし事前学習ソリューションを提供する。
近年のPrompting技術の成功に触発されて,QEISモデルを強化した新しい事前学習手法を導入する。
実験結果から,本手法は3つのデータセット上でのいくつかのQEISモデルを大幅に向上させることが示された。
論文 参考訳(メタデータ) (2023-02-02T15:49:03Z) - CAD: Co-Adapting Discriminative Features for Improved Few-Shot
Classification [11.894289991529496]
少数のラベル付きサンプルを与えられた未確認のクラスに適応できるモデルを学ぶことを目的としている。
最近のアプローチでは、特徴抽出器を事前訓練し、その後、エピソードなメタラーニングのための微調整を行う。
本研究は, 複数ショットの分類において, 横断的および再重み付き識別機能を実現するための戦略を提案する。
論文 参考訳(メタデータ) (2022-03-25T06:14:51Z) - Learning What Not to Segment: A New Perspective on Few-Shot Segmentation [63.910211095033596]
近年では、FSS ( few-shot segmentation) が広く開発されている。
本稿では,問題を緩和するための新鮮で直接的な知見を提案する。
提案されたアプローチのユニークな性質を踏まえて、より現実的で挑戦的な設定にまで拡張する。
論文 参考訳(メタデータ) (2022-03-15T03:08:27Z) - Modeling the Background for Incremental Learning in Semantic
Segmentation [39.025848280224785]
深いアーキテクチャは破滅的な忘れ方に弱い。
本稿では,意味的セグメンテーションの文脈においてこの問題に対処する。
本稿では,このシフトを明示的に考慮した蒸留法に基づく新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2020-02-03T13:30:38Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。