論文の概要: Unsupervised Hierarchical Semantic Segmentation with Multiview
Cosegmentation and Clustering Transformers
- arxiv url: http://arxiv.org/abs/2204.11432v1
- Date: Mon, 25 Apr 2022 04:40:46 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-26 19:59:27.685566
- Title: Unsupervised Hierarchical Semantic Segmentation with Multiview
Cosegmentation and Clustering Transformers
- Title(参考訳): 多視点コセグメンテーションとクラスタリングトランスフォーマによる教師なし階層的意味セグメンテーション
- Authors: Tsung-Wei Ke, Jyh-Jing Hwang, Yunhui Guo, Xudong Wang and Stella X. Yu
- Abstract要約: グループ化は自然に粒度のレベルを持ち、教師なしのセグメンテーションにおいて曖昧さを生み出す。
階層的セグメンテーショングループ(HSG)と呼ばれる,データ駆動型非教師付き階層的セグメンテーション手法を初めて提供する。
- 参考スコア(独自算出の注目度): 47.45830503277631
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Unsupervised semantic segmentation aims to discover groupings within and
across images that capture object and view-invariance of a category without
external supervision. Grouping naturally has levels of granularity, creating
ambiguity in unsupervised segmentation. Existing methods avoid this ambiguity
and treat it as a factor outside modeling, whereas we embrace it and desire
hierarchical grouping consistency for unsupervised segmentation.
We approach unsupervised segmentation as a pixel-wise feature learning
problem. Our idea is that a good representation shall reveal not just a
particular level of grouping, but any level of grouping in a consistent and
predictable manner. We enforce spatial consistency of grouping and bootstrap
feature learning with co-segmentation among multiple views of the same image,
and enforce semantic consistency across the grouping hierarchy with clustering
transformers between coarse- and fine-grained features.
We deliver the first data-driven unsupervised hierarchical semantic
segmentation method called Hierarchical Segment Grouping (HSG). Capturing
visual similarity and statistical co-occurrences, HSG also outperforms existing
unsupervised segmentation methods by a large margin on five major object- and
scene-centric benchmarks. Our code is publicly available at
https://github.com/twke18/HSG .
- Abstract(参考訳): 教師なしセマンティクスセグメンテーションは、オブジェクトをキャプチャする画像内と、外部の監督なしでカテゴリのビュー不変性を検出することを目的としている。
グループ化は自然に粒度のレベルを持ち、教師なしのセグメンテーションにおいて曖昧さを生み出す。
既存の手法ではあいまいさを避けてモデリング以外の要素として扱うが、私たちはそれを受け入れ、教師なしのセグメンテーションに対して階層的なグループ化一貫性を求める。
我々は画素単位の機能学習問題として教師なしセグメンテーションにアプローチする。
私たちの考えでは、よい表現は特定のグループ化のレベルだけでなく、一貫性があり予測可能な方法でグループ化のレベルも明らかにするでしょう。
我々は,同一画像の複数ビュー間の協調によるグループ化とブートストラップの特徴学習の空間的一貫性を強制し,粗い特徴ときめ細かな特徴の間のクラスタリング変換を伴うグループ化階層全体の意味的一貫性を強制する。
階層的セグメンテーショングループ(HSG)と呼ばれる,データ駆動型非教師付き階層的セグメンテーション手法を初めて提供する。
視覚的類似性と統計的共起を捉えることで、HSGは5つの主要なオブジェクト中心およびシーン中心のベンチマークにおいて、既存の教師なしセグメンテーション手法よりも大きなマージンを達成している。
私たちのコードはhttps://github.com/twke18/HSGで公開されています。
関連論文リスト
- OMH: Structured Sparsity via Optimally Matched Hierarchy for Unsupervised Semantic Segmentation [69.37484603556307]
Un Semantic segmenting (USS)は、事前に定義されたラベルに頼ることなく、イメージをセグメント化する。
上記の問題を同時に解決するために,OMH (Optimally Matched Hierarchy) という新しいアプローチを導入する。
我々のOMHは既存のUSS法と比較して教師なしセグメンテーション性能がよい。
論文 参考訳(メタデータ) (2024-03-11T09:46:41Z) - Unsupervised Universal Image Segmentation [59.0383635597103]
本稿では,Unsupervised Universal Model (U2Seg) を提案する。
U2Segは、自己教師付きモデルを利用して、これらのセグメンテーションタスクの擬似意味ラベルを生成する。
次に、これらの擬似意味ラベル上でモデルを自己学習し、かなりの性能向上をもたらす。
論文 参考訳(メタデータ) (2023-12-28T18:59:04Z) - A Lightweight Clustering Framework for Unsupervised Semantic
Segmentation [28.907274978550493]
教師なしセマンティックセグメンテーションは、注釈付きデータを用いることなく、画像の各ピクセルを対応するクラスに分類することを目的としている。
教師なしセマンティックセグメンテーションのための軽量クラスタリングフレームワークを提案する。
本フレームワークは,PASCAL VOCおよびMS COCOデータセットの最先端結果を実現する。
論文 参考訳(メタデータ) (2023-11-30T15:33:42Z) - Causal Unsupervised Semantic Segmentation [60.178274138753174]
教師なしセマンティックセグメンテーションは、人間のラベル付きアノテーションなしで高品質なセマンティックセマンティックセグメンテーションを実現することを目的としている。
本稿では、因果推論からの洞察を活用する新しいフレームワークCAUSE(CAusal Unsupervised Semantic sEgmentation)を提案する。
論文 参考訳(メタデータ) (2023-10-11T10:54:44Z) - Open-world Semantic Segmentation via Contrasting and Clustering
Vision-Language Embedding [95.78002228538841]
本研究では,様々なオープンワールドカテゴリのセマンティックオブジェクトを高密度アノテーションを使わずにセマンティックオブジェクトのセマンティックオブジェクトのセマンティック化を学習するための,新しいオープンワールドセマンティックセマンティックセマンティックセマンティクスパイプラインを提案する。
提案手法は任意のカテゴリのオブジェクトを直接分割し、3つのベンチマークデータセット上でデータラベリングを必要とするゼロショットセグメンテーション法より優れている。
論文 参考訳(メタデータ) (2022-07-18T09:20:04Z) - Deep Spectral Methods: A Surprisingly Strong Baseline for Unsupervised
Semantic Segmentation and Localization [98.46318529630109]
画像分解をグラフ分割問題として再フレーミングすることで,従来のスペクトル分割法から着想を得た。
これらの固有ベクトルはすでにイメージを意味のあるセグメントに分解しており、シーン内のオブジェクトのローカライズに容易に利用できる。
データセットにまたがるこれらのセグメントに関連する機能をクラスタ化することで、明確に定義された、名前付き可能なリージョンを得ることができる。
論文 参考訳(メタデータ) (2022-05-16T17:47:44Z) - TransFGU: A Top-down Approach to Fine-Grained Unsupervised Semantic
Segmentation [44.75300205362518]
教師なしセマンティックセグメンテーションは、手動のアノテーションを使わずに、低レベルの視覚的特徴の高レベルセマンティック表現を得ることを目的としている。
本稿では, 非常に複雑なシナリオにおける細粒度セグメンテーションのための, トップダウンの教師なしセグメンテーションフレームワークを提案する。
我々の結果は、トップダウンの教師なしセグメンテーションが、オブジェクト中心とシーン中心の両方のデータセットに対して堅牢であることを示している。
論文 参考訳(メタデータ) (2021-12-02T18:59:03Z) - Labels4Free: Unsupervised Segmentation using StyleGAN [40.39780497423365]
本稿では,StyleGAN生成オブジェクトに対する教師なしセグメンテーションフレームワークを提案する。
最先端の教師付きセグメンテーションネットワークに対する比較結果について報告する。
論文 参考訳(メタデータ) (2021-03-27T18:59:22Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。