論文の概要: APANet: Adaptive Prototypes Alignment Network for Few-Shot Semantic
Segmentation
- arxiv url: http://arxiv.org/abs/2111.12263v1
- Date: Wed, 24 Nov 2021 04:38:37 GMT
- ステータス: 処理完了
- システム内更新日: 2021-11-25 14:56:30.133009
- Title: APANet: Adaptive Prototypes Alignment Network for Few-Shot Semantic
Segmentation
- Title(参考訳): APANet:Few-Shot Semantic Segmentationのための適応プロトタイプアライメントネットワーク
- Authors: Jiacheng Chen, Bin-Bin Gao, Zongqing Lu, Jing-Hao Xue, Chengjie Wang
and Qingmin Liao
- Abstract要約: Few-shotのセマンティックセマンティックセマンティクスは、指定されたクエリイメージに、ラベル付きサポートイメージのみで、新規クラスのオブジェクトをセグメントすることを目的としている。
ほとんどの高度なソリューションは、各クエリ機能を学習したクラス固有のプロトタイプにマッチさせることでセグメンテーションを実行するメトリクス学習フレームワークを利用している。
本稿では,クラス固有およびクラス非依存のプロトタイプを導入することで,適応型プロトタイプ表現を提案する。
- 参考スコア(独自算出の注目度): 56.387647750094466
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Few-shot semantic segmentation aims to segment novel-class objects in a given
query image with only a few labeled support images. Most advanced solutions
exploit a metric learning framework that performs segmentation through matching
each query feature to a learned class-specific prototype. However, this
framework suffers from biased classification due to incomplete feature
comparisons. To address this issue, we present an adaptive prototype
representation by introducing class-specific and class-agnostic prototypes and
thus construct complete sample pairs for learning semantic alignment with query
features. The complementary features learning manner effectively enriches
feature comparison and helps yield an unbiased segmentation model in the
few-shot setting. It is implemented with a two-branch end-to-end network (\ie,
a class-specific branch and a class-agnostic branch), which generates
prototypes and then combines query features to perform comparisons. In
addition, the proposed class-agnostic branch is simple yet effective. In
practice, it can adaptively generate multiple class-agnostic prototypes for
query images and learn feature alignment in a self-contrastive manner.
Extensive experiments on PASCAL-5$^i$ and COCO-20$^i$ demonstrate the
superiority of our method. At no expense of inference efficiency, our model
achieves state-of-the-art results in both 1-shot and 5-shot settings for
semantic segmentation.
- Abstract(参考訳): 少数ショットのセマンティクスセグメンテーションは、限られたラベル付きサポートイメージで、与えられたクエリイメージ内の新規クラスオブジェクトをセグメンテーションすることを目的としている。
ほとんどの高度なソリューションは、各クエリ機能を学習クラス固有のプロトタイプにマッチさせることでセグメンテーションを実行するメトリクス学習フレームワークを利用している。
しかし、このフレームワークは不完全な特徴比較のために偏りのある分類に苦しむ。
この問題に対処するために、クラス固有およびクラス非依存のプロトタイプを導入し、クエリ機能とセマンティックアライメントを学習するための完全なサンプルペアを構築する。
補足的な特徴学習手法は、特徴比較を効果的に強化し、未偏分割のセグメンテーションモデルを得るのに役立つ。
2分岐のエンドツーエンドネットワーク(クラス固有のブランチとクラスに依存しないブランチ)で実装され、プロトタイプを生成し、クエリ機能を組み合わせて比較を行う。
さらに、提案するクラス非依存分岐は単純だが有効である。
実際には、クエリ画像のための複数のクラスに依存しないプロトタイプを適応的に生成し、自己コントラスト的な特徴アライメントを学習することができる。
PASCAL-5$^i$およびCOCO-20$^i$の大規模な実験により,本手法の優位性を実証した。
推論効率を犠牲にすることなく,セマンティクスセグメンテーションのための1ショット設定と5ショット設定の両方において,最先端の結果が得られる。
関連論文リスト
- Rethinking Person Re-identification from a Projection-on-Prototypes
Perspective [84.24742313520811]
検索タスクとしてのPerson Re-IDentification(Re-ID)は,過去10年間で大きな発展を遂げてきた。
本稿では,新しいベースライン ProNet を提案する。
4つのベンチマークの実験では、提案したProNetは単純だが有効であり、以前のベースラインを大きく上回っている。
論文 参考訳(メタデータ) (2023-08-21T13:38:10Z) - A Joint Framework Towards Class-aware and Class-agnostic Alignment for
Few-shot Segmentation [11.47479526463185]
Few-shotのセグメンテーションは、いくつかの注釈付きサポートイメージが与えられた未確認クラスのオブジェクトをセグメントすることを目的としている。
既存のほとんどのメソッドは、クエリ機能を独立したサポートプロトタイプで縫い付け、混合機能をデコーダに供給することでクエリイメージを分割する。
セグメンテーションを容易にするために,より価値の高いクラス認識とクラス非依存アライメントガイダンスを組み合わせた共同フレームワークを提案する。
論文 参考訳(メタデータ) (2022-11-02T17:33:25Z) - CAD: Co-Adapting Discriminative Features for Improved Few-Shot
Classification [11.894289991529496]
少数のラベル付きサンプルを与えられた未確認のクラスに適応できるモデルを学ぶことを目的としている。
最近のアプローチでは、特徴抽出器を事前訓練し、その後、エピソードなメタラーニングのための微調整を行う。
本研究は, 複数ショットの分類において, 横断的および再重み付き識別機能を実現するための戦略を提案する。
論文 参考訳(メタデータ) (2022-03-25T06:14:51Z) - Contrastive Enhancement Using Latent Prototype for Few-Shot Segmentation [8.986743262828009]
短いショットのセグメンテーションにより、アノテーション付きの例がほとんどない未確認のクラスを認識できる。
本稿では,潜伏クラスを活用するために潜伏型プロトタイプを用いた対照的な拡張手法を提案する。
提案手法は,1ショットと5ショットのセグメンテーションにおける最先端手法の性能を著しく向上させる。
論文 参考訳(メタデータ) (2022-03-08T14:02:32Z) - Dual Prototypical Contrastive Learning for Few-shot Semantic
Segmentation [55.339405417090084]
本稿では,FSSタスクに適合する2つの特徴的コントラスト学習手法を提案する。
第一の考え方は、プロトタイプの特徴空間におけるクラス内距離を減少させながら、クラス間距離を増やすことで、プロトタイプをより差別的にすることである。
提案手法は,PASCAL-5iおよびCOCO-20iデータセット上で,最先端のFSS手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2021-11-09T08:14:50Z) - SCNet: Enhancing Few-Shot Semantic Segmentation by Self-Contrastive
Background Prototypes [56.387647750094466]
Few-shot セマンティックセマンティックセマンティクスは,クエリイメージ内の新規クラスオブジェクトを,アノテーション付きの例で分割することを目的としている。
先進的なソリューションのほとんどは、各ピクセルを学習した前景のプロトタイプに合わせることでセグメンテーションを行うメトリクス学習フレームワークを利用している。
このフレームワークは、前景プロトタイプのみとのサンプルペアの不完全な構築のために偏った分類に苦しんでいます。
論文 参考訳(メタデータ) (2021-04-19T11:21:47Z) - Semantically Meaningful Class Prototype Learning for One-Shot Image
Semantic Segmentation [58.96902899546075]
ワンショットセマンティックイメージセグメンテーションは、1つの注釈付きイメージで新しいクラスのオブジェクト領域を分割することを目的としている。
最近の研究では、テスト時に予想される状況を模倣するために、エピソディクストレーニング戦略を採用している。
エピソードトレーニングにおいて,マルチクラスラベル情報を活用することを提案する。
ネットワークが各カテゴリに対してより意味のある機能を生成するように促すだろう。
論文 参考訳(メタデータ) (2021-02-22T12:07:35Z) - Part-aware Prototype Network for Few-shot Semantic Segmentation [50.581647306020095]
本稿では,プロトタイプ表現に基づく新規な数ショットセマンティックセマンティックセマンティクスフレームワークを提案する。
私たちのキーとなるアイデアは、全体論的なクラス表現を、部分認識型プロトタイプのセットに分解することです。
提案する部分認識型プロトタイプを生成・拡張する新しいグラフニューラルネットワークモデルを開発した。
論文 参考訳(メタデータ) (2020-07-13T11:03:09Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。