論文の概要: Activating the Discriminability of Novel Classes for Few-shot
Segmentation
- arxiv url: http://arxiv.org/abs/2212.01131v1
- Date: Fri, 2 Dec 2022 12:22:36 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-05 16:58:50.215790
- Title: Activating the Discriminability of Novel Classes for Few-shot
Segmentation
- Title(参考訳): ファウショットセグメンテーションのための新しいクラスの識別可能性の活性化
- Authors: Dianwen Mei, Wei Zhuo, Jiandong Tian, Guangming Lu, Wenjie Pei
- Abstract要約: 本稿では,特徴符号化段階とセグメンテーションの予測段階の両方において,新規クラスの識別可能性を明示的に活性化することを提案する。
セグメンテーションの予測段階では、クエリ画像の高信頼画素を用いて自分自身を洗練できる自己修正オンラインフォアグラウンド分類器(SROFB)を学習する。
- 参考スコア(独自算出の注目度): 48.542627940781095
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Despite the remarkable success of existing methods for few-shot segmentation,
there remain two crucial challenges. First, the feature learning for novel
classes is suppressed during the training on base classes in that the novel
classes are always treated as background. Thus, the semantics of novel classes
are not well learned. Second, most of existing methods fail to consider the
underlying semantic gap between the support and the query resulting from the
representative bias by the scarce support samples. To circumvent these two
challenges, we propose to activate the discriminability of novel classes
explicitly in both the feature encoding stage and the prediction stage for
segmentation. In the feature encoding stage, we design the Semantic-Preserving
Feature Learning module (SPFL) to first exploit and then retain the latent
semantics contained in the whole input image, especially those in the
background that belong to novel classes. In the prediction stage for
segmentation, we learn an Self-Refined Online Foreground-Background classifier
(SROFB), which is able to refine itself using the high-confidence pixels of
query image to facilitate its adaptation to the query image and bridge the
support-query semantic gap. Extensive experiments on PASCAL-5$^i$ and
COCO-20$^i$ datasets demonstrates the advantages of these two novel designs
both quantitatively and qualitatively.
- Abstract(参考訳): 数発のセグメンテーションで既存の手法が驚くほど成功したにもかかわらず、依然として2つの重要な課題がある。
まず,新しい授業が常に背景として扱われるように,新しい授業の特徴学習を基礎授業の訓練中に抑制する。
したがって、新しいクラスのセマンティクスは十分に学ばない。
第二に、既存のメソッドのほとんどが、サポートの不足による代表バイアスから生じるクエリとサポートの間のセマンティクスギャップを考慮できていない。
これら2つの課題を回避すべく,特徴符号化段階と予測段階の両方において,新規クラスの識別性を明示的に活性化する。
特徴エンコーディングの段階では,まずsemantic-preserving feature learning module (spfl) を設計し,入力画像全体,特に新しいクラスに属する背景に含まれている潜在意味性を保持する。
セグメンテーションの予測段階では,クエリ画像の信頼度の高い画素を用いて自らを洗練し,クエリ画像への適応を容易にし,サポート・クエリ・セマンティクスギャップを橋渡しできる自己改良型オンラインフォアグラウンド・バックグラウンド分類器(srofb)を学習する。
pascal-5$^i$とcoco-20$^i$データセットに関する広範な実験は、これら2つの新しい設計の量的および質的利点を示している。
関連論文リスト
- Semantic Enhanced Few-shot Object Detection [37.715912401900745]
本稿では, セマンティックな埋め込みを利用してより優れた検出を行う, 微調整に基づくFSODフレームワークを提案する。
提案手法は,各新規クラスが類似の基底クラスと混同されることなく,コンパクトな特徴空間を構築することを可能にする。
論文 参考訳(メタデータ) (2024-06-19T12:40:55Z) - Harmonizing Base and Novel Classes: A Class-Contrastive Approach for
Generalized Few-Shot Segmentation [78.74340676536441]
本稿では,プロトタイプの更新を規制し,プロトタイプ間の距離を広くするために,クラス間のコントラスト損失とクラス関係損失を提案する。
提案手法は,PASCAL VOC および MS COCO データセット上での一般化された小ショットセグメンテーションタスクに対して,新しい最先端性能を実現する。
論文 参考訳(メタデータ) (2023-03-24T00:30:25Z) - Automatically Discovering Novel Visual Categories with Self-supervised
Prototype Learning [68.63910949916209]
本稿では,大規模な画像収集において未知のカテゴリを識別することを目的とした,新しいカテゴリ発見(NCD)の課題に取り組む。
本稿では,プロトタイプ表現学習とプロトタイプ自己学習という,2つの主要な段階からなる適応型プロトタイプ学習手法を提案する。
本研究では,4つのベンチマークデータセットについて広範な実験を行い,提案手法の有効性とロバスト性を示す。
論文 参考訳(メタデータ) (2022-08-01T16:34:33Z) - Incremental Few-Shot Learning via Implanting and Compressing [13.122771115838523]
増分的なFew-Shot Learningは、いくつかの例から新しいクラスを継続的に学習するモデルを必要とする。
我々はtextbfImplanting と textbfCompressing と呼ばれる2段階の学習戦略を提案する。
具体的には、textbfImplantingのステップにおいて、新しいクラスのデータ分布をデータ・アサンダント・ベース・セットの助けを借りて模倣することを提案する。
textbfのステップでは、特徴抽出器を各新規クラスを正確に表現し、クラス内コンパクト性を高める。
論文 参考訳(メタデータ) (2022-03-19T11:04:43Z) - Learning What Not to Segment: A New Perspective on Few-Shot Segmentation [63.910211095033596]
近年では、FSS ( few-shot segmentation) が広く開発されている。
本稿では,問題を緩和するための新鮮で直接的な知見を提案する。
提案されたアプローチのユニークな性質を踏まえて、より現実的で挑戦的な設定にまで拡張する。
論文 参考訳(メタデータ) (2022-03-15T03:08:27Z) - Modeling the Background for Incremental and Weakly-Supervised Semantic
Segmentation [39.025848280224785]
セマンティックセグメンテーションのための新しい漸進的なクラス学習手法を提案する。
各トレーニングステップは、すべての可能なクラスのサブセットにのみアノテーションを提供するので、バックグラウンドクラスのピクセルはセマンティックシフトを示す。
本研究では,Pascal-VOC,ADE20K,Cityscapesのデータセットを広範囲に評価し,提案手法の有効性を実証する。
論文 参考訳(メタデータ) (2022-01-31T16:33:21Z) - Few-Shot Object Detection via Association and DIscrimination [83.8472428718097]
AssociationとDIscriminationによるオブジェクト検出は、新しいクラスごとに2つのステップで識別可能な特徴空間を構築している。
Pascal VOCとMS-COCOデータセットの実験では、FADIは新しいSOTAパフォーマンスを実現し、ショット/スプリットのベースラインを+18.7で大幅に改善した。
論文 参考訳(メタデータ) (2021-11-23T05:04:06Z) - Continual Semantic Segmentation via Repulsion-Attraction of Sparse and
Disentangled Latent Representations [18.655840060559168]
本稿では,セマンティックセグメンテーションにおけるクラス連続学習に着目した。
新しいカテゴリは時間とともに利用可能になり、以前のトレーニングデータは保持されない。
提案された連続学習スキームは、潜在空間を形作り、新しいクラスの認識を改善しながら忘れを減らす。
論文 参考訳(メタデータ) (2021-03-10T21:02:05Z) - Prior Guided Feature Enrichment Network for Few-Shot Segmentation [64.91560451900125]
最先端のセマンティックセグメンテーション手法は、良い結果を得るために十分なラベル付きデータを必要とする。
少数のラベル付きサポートサンプルを持つ新しいクラスに迅速に適応するモデルを学習することで,この問題に対処するためのショットセグメンテーションが提案されている。
これらのフレームワークは、高レベルのセマンティック情報の不適切な使用により、目に見えないクラスにおける一般化能力の低下という課題に直面している。
論文 参考訳(メタデータ) (2020-08-04T10:41:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。