論文の概要: 3D Compositional Zero-shot Learning with DeCompositional Consensus
- arxiv url: http://arxiv.org/abs/2111.14673v1
- Date: Mon, 29 Nov 2021 16:34:53 GMT
- ステータス: 処理完了
- システム内更新日: 2021-11-30 17:35:21.931455
- Title: 3D Compositional Zero-shot Learning with DeCompositional Consensus
- Title(参考訳): Decompositional Consensusを用いた3次元ゼロショット学習
- Authors: Muhammad Ferjad Naeem, Evin P{\i}nar \"Ornek, Yongqin Xian, Luc Van
Gool, Federico Tombari
- Abstract要約: 我々は、部分的知識は観察されたオブジェクトクラスを超えて構成可能であるべきだと論じる。
本稿では、視覚から見えないオブジェクトクラスへの部分一般化の問題として、3D合成ゼロショット学習を提案する。
- 参考スコア(独自算出の注目度): 102.7571947144639
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Parts represent a basic unit of geometric and semantic similarity across
different objects. We argue that part knowledge should be composable beyond the
observed object classes. Towards this, we present 3D Compositional Zero-shot
Learning as a problem of part generalization from seen to unseen object classes
for semantic segmentation. We provide a structured study through benchmarking
the task with the proposed Compositional-PartNet dataset. This dataset is
created by processing the original PartNet to maximize part overlap across
different objects. The existing point cloud part segmentation methods fail to
generalize to unseen object classes in this setting. As a solution, we propose
DeCompositional Consensus, which combines a part segmentation network with a
part scoring network. The key intuition to our approach is that a segmentation
mask over some parts should have a consensus with its part scores when each
part is taken apart. The two networks reason over different part combinations
defined in a per-object part prior to generate the most suitable segmentation
mask. We demonstrate that our method allows compositional zero-shot
segmentation and generalized zero-shot classification, and establishes the
state of the art on both tasks.
- Abstract(参考訳): 部品は、異なる対象にまたがる幾何学的および意味的類似性の基本的な単位を表す。
我々は、部分的知識は観察されたオブジェクトクラスを超えて構成可能であるべきだと論じる。
そこで本研究では、3次元合成ゼロショット学習を視覚から見えないオブジェクトクラスへのセグメンテーションへの部分一般化の問題として提示する。
提案するコンポジション・パートネットデータセットでタスクをベンチマークして構造化研究を行う。
このデータセットは、元のpartnetを処理して、異なるオブジェクト間の部分重なりを最大化する。
既存のポイントクラウド部分のセグメンテーションメソッドは、この設定で見えないオブジェクトクラスに一般化できない。
そこで本研究では,部分分割ネットワークと部分スコアリングネットワークを組み合わせたDeCompositional Consensusを提案する。
このアプローチに対する重要な直感は、部分の分割マスクが、各部分の分解時にその部分のスコアとコンセンサスを持つべきだということです。
2つのネットワークは、最も適切なセグメンテーションマスクを生成する前に、オブジェクトごとの異なる組み合わせを推論する。
提案手法は, 合成ゼロショット分割と一般化ゼロショット分類を可能にし, 両タスクにおける技術状態を確立する。
関連論文リスト
- Towards Open-World Segmentation of Parts [16.056921233445784]
本稿では,クラスに依存しない部分分割タスクを提案する。
パートクラスなしでトレーニングされたモデルは、トレーニング時に見えない部分のローカライズとオブジェクトへのセグメンテーションを改善することができる、と私たちは主張する。
当社のアプローチでは,オープンワールドのパートセグメンテーションに向けた重要なステップとして,注目すべきかつ一貫した成果をあげています。
論文 参考訳(メタデータ) (2023-05-26T10:34:58Z) - Discovering Object Masks with Transformers for Unsupervised Semantic
Segmentation [75.00151934315967]
MaskDistillは教師なしセマンティックセグメンテーションのための新しいフレームワークである。
我々のフレームワークは、低レベルの画像キューにラッチを付けず、オブジェクト中心のデータセットに限らない。
論文 参考訳(メタデータ) (2022-06-13T17:59:43Z) - PartAfford: Part-level Affordance Discovery from 3D Objects [113.91774531972855]
パートレベルの空き地探索(PartAfford)の課題について紹介する。
対象物当たりの空きラベルのみを考慮し、(i)3D形状を部品に分解し、(ii)各部品が特定の空きカテゴリに対応する方法を検出する。
本稿では,パーセンテージ・セットの監督と幾何学的原始正規化のみを活用することで,パートレベルの表現を発見する新しい学習フレームワークを提案する。
論文 参考訳(メタデータ) (2022-02-28T02:58:36Z) - Robust 3D Scene Segmentation through Hierarchical and Learnable
Part-Fusion [9.275156524109438]
3Dセマンティックセグメンテーションは、自律運転、ロボット工学、AR/VRといったいくつかのシーン理解アプリケーションのための基本的なビルディングブロックである。
従来の手法では、階層的で反復的な手法を用いて意味や事例情報を融合するが、文脈融合における学習性は欠如している。
本稿では,セグメンテーション・フュージョン(Seegment-Fusion)について述べる。
論文 参考訳(メタデータ) (2021-11-16T13:14:47Z) - Unsupervised Part Discovery from Contrastive Reconstruction [90.88501867321573]
自己監督型視覚表現学習の目標は、強く伝達可能な画像表現を学習することである。
対象部分の発見とセグメンテーションに対する教師なしアプローチを提案する。
本手法は, 細粒度, 視覚的に異なるカテゴリ間でセマンティックな部分を生成する。
論文 参考訳(メタデータ) (2021-11-11T17:59:42Z) - Locate then Segment: A Strong Pipeline for Referring Image Segmentation [73.19139431806853]
参照画像セグメンテーションは、自然言語表現によって参照されるオブジェクトをセグメンテーションすることを目的とする。
従来の方法は、視覚言語機能を融合させ、最終的なセグメンテーションマスクを直接生成するための暗黙的および反復的な相互作用メカニズムの設計に焦点を当てています。
これらの問題に取り組むための「Then-Then-Segment」スキームを紹介します。
私たちのフレームワークはシンプルですが驚くほど効果的です。
論文 参考訳(メタデータ) (2021-03-30T12:25:27Z) - Learning Panoptic Segmentation from Instance Contours [9.347742071428918]
Panopticpixel は、背景 (stuff) とオブジェクト (things) のインスタンスをピクセルレベルで理解することを目的としている。
セマンティックセグメンテーション(レベル分類)とインスタンスセグメンテーションの別々のタスクを組み合わせて、単一の統合されたシーン理解タスクを構築する。
セマンティックセグメンテーションとインスタンス輪郭からインスタンスセグメンテーションを学習する完全畳み込みニューラルネットワークを提案する。
論文 参考訳(メタデータ) (2020-10-16T03:05:48Z) - Part-aware Prototype Network for Few-shot Semantic Segmentation [50.581647306020095]
本稿では,プロトタイプ表現に基づく新規な数ショットセマンティックセマンティックセマンティクスフレームワークを提案する。
私たちのキーとなるアイデアは、全体論的なクラス表現を、部分認識型プロトタイプのセットに分解することです。
提案する部分認識型プロトタイプを生成・拡張する新しいグラフニューラルネットワークモデルを開発した。
論文 参考訳(メタデータ) (2020-07-13T11:03:09Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。