論文の概要: Open-World Instance Segmentation: Exploiting Pseudo Ground Truth From
Learned Pairwise Affinity
- arxiv url: http://arxiv.org/abs/2204.06107v1
- Date: Tue, 12 Apr 2022 22:37:49 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-14 13:25:17.038863
- Title: Open-World Instance Segmentation: Exploiting Pseudo Ground Truth From
Learned Pairwise Affinity
- Title(参考訳): オープンワールドのインスタンスセグメンテーション:学習されたペアの親和性から疑似基底真理を活用
- Authors: Weiyao Wang, Matt Feiszli, Heng Wang, Jitendra Malik, Du Tran
- Abstract要約: 我々は、マスク提案のための新しいアプローチ、ジェネリックグループネットワーク(GGN)を提案する。
我々のアプローチは、ピクセル親和性の局所測定とインスタンスレベルのマスク監視を組み合わせることで、データの多様性が許容するほど汎用的なモデルを設計したトレーニングレギュレータを生成する。
- 参考スコア(独自算出の注目度): 59.1823948436411
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Open-world instance segmentation is the task of grouping pixels into object
instances without any pre-determined taxonomy. This is challenging, as
state-of-the-art methods rely on explicit class semantics obtained from large
labeled datasets, and out-of-domain evaluation performance drops significantly.
Here we propose a novel approach for mask proposals, Generic Grouping Networks
(GGNs), constructed without semantic supervision. Our approach combines a local
measure of pixel affinity with instance-level mask supervision, producing a
training regimen designed to make the model as generic as the data diversity
allows. We introduce a method for predicting Pairwise Affinities (PA), a
learned local relationship between pairs of pixels. PA generalizes very well to
unseen categories. From PA we construct a large set of pseudo-ground-truth
instance masks; combined with human-annotated instance masks we train GGNs and
significantly outperform the SOTA on open-world instance segmentation on
various benchmarks including COCO, LVIS, ADE20K, and UVO. Code is available on
project website: https://sites.google.com/view/generic-grouping/.
- Abstract(参考訳): オープンワールドのインスタンスセグメンテーションは、事前に決定された分類なしに、ピクセルをオブジェクトインスタンスにグループ化するタスクである。
最先端の手法は大きなラベル付きデータセットから得られた明示的なクラスセマンティクスに依存しており、ドメイン外評価のパフォーマンスは大幅に低下する。
本稿では,マスク提案のための新しいアプローチであるジェネリック・グルーピング・ネットワーク(GGN)を提案する。
我々のアプローチは、ピクセル親和性の局所測定とインスタンスレベルのマスク監視を組み合わせることで、データの多様性が許容するほど汎用的なモデルを設計したトレーニングレギュレータを生成する。
本稿では,ピクセル対間の局所関係を学習したペアワイズアフィニティ(pa)を予測する手法を提案する。
PAは目に見えないカテゴリに非常によく一般化する。
PAでは,GGNをトレーニングし,COCO,LVIS,ADE20K,UVOなど,さまざまなベンチマーク上でのオープンワールドインスタンスセグメンテーションにおいてSOTAを大幅に上回っている。
コードはプロジェクトのWebサイト(https://sites.google.com/view/generic-grouping/)で入手できる。
関連論文リスト
- Boosting Unsupervised Semantic Segmentation with Principal Mask Proposals [15.258631373740686]
教師なしセマンティックセグメンテーションは、画像コーパス内のグローバルセマンティックカテゴリをアノテーションなしで識別することで、画像を自動的に意味のある領域に分割することを目的としている。
そこで,PriMaP - 主マスク提案 - 特徴表現に基づいてイメージを意味的に意味のあるマスクに分解する。
これにより、予測最大化アルゴリズムであるPriMaPs-EMを用いて、クラスプロトタイプをPriMaPsに適合させることで、教師なしセマンティックセマンティックセマンティクスを実現することができる。
論文 参考訳(メタデータ) (2024-04-25T17:58:09Z) - Unsupervised Universal Image Segmentation [59.0383635597103]
本稿では,Unsupervised Universal Model (U2Seg) を提案する。
U2Segは、自己教師付きモデルを利用して、これらのセグメンテーションタスクの擬似意味ラベルを生成する。
次に、これらの擬似意味ラベル上でモデルを自己学習し、かなりの性能向上をもたらす。
論文 参考訳(メタデータ) (2023-12-28T18:59:04Z) - PWISeg: Point-based Weakly-supervised Instance Segmentation for Surgical
Instruments [27.89003436883652]
我々はPWISeg (Point-based Weakly-supervised Instance) という,弱制御型手術器具セグメンテーション手法を提案する。
PWISegは、特徴点とバウンディングボックスの関係をモデル化するために、ポイント・ツー・ボックスとポイント・ツー・マスクのブランチを備えたFCNベースのアーキテクチャを採用している。
そこで本研究では,キー・ツー・マスク・ブランチを駆動し,より正確なセグメンテーション予測を生成するキー・ピクセル・アソシエーション・ロスとキー・ピクセル・アソシエーション・ロスを提案する。
論文 参考訳(メタデータ) (2023-11-16T11:48:29Z) - HGFormer: Hierarchical Grouping Transformer for Domain Generalized
Semantic Segmentation [113.6560373226501]
本研究は領域一般化設定の下で意味的セグメンテーションを研究する。
本稿では,階層型グループ化変換器(HGFormer)を提案する。
実験により、HGFormerはピクセルごとの分類法やフラットグルーピング変換器よりも、より堅牢なセマンティックセグメンテーション結果が得られることが示された。
論文 参考訳(メタデータ) (2023-05-22T13:33:41Z) - Discovering Object Masks with Transformers for Unsupervised Semantic
Segmentation [75.00151934315967]
MaskDistillは教師なしセマンティックセグメンテーションのための新しいフレームワークである。
我々のフレームワークは、低レベルの画像キューにラッチを付けず、オブジェクト中心のデータセットに限らない。
論文 参考訳(メタデータ) (2022-06-13T17:59:43Z) - SOLO: A Simple Framework for Instance Segmentation [84.00519148562606]
インスタンスカテゴリ"は、インスタンスの場所に応じて、インスタンス内の各ピクセルにカテゴリを割り当てる。
SOLO"は、強力なパフォーマンスを備えたインスタンスセグメンテーションのための、シンプルで、直接的で、高速なフレームワークです。
提案手法は, 高速化と精度の両面から, 実例分割の最先端結果を実現する。
論文 参考訳(メタデータ) (2021-06-30T09:56:54Z) - Exemplar-Based Open-Set Panoptic Segmentation Network [79.99748041746592]
我々は、オープンワールドにパン光学セグメンテーションを拡張し、オープンセットのパン光学セグメンテーション(OPS)タスクを導入する。
本研究では,タスクの実践的課題を調査し,既存のデータセットであるCOCO上にベンチマークを構築する。
本稿では,エスペクティブ理論に着想を得た,エスペクティブ・ベース・オープン・セット・パノプティブ・セグメンテーション・ネットワーク(EOPSN)を提案する。
論文 参考訳(メタデータ) (2021-05-18T07:59:21Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。