論文の概要: SPCL: A New Framework for Domain Adaptive Semantic Segmentation via
Semantic Prototype-based Contrastive Learning
- arxiv url: http://arxiv.org/abs/2111.12358v1
- Date: Wed, 24 Nov 2021 09:26:07 GMT
- ステータス: 処理完了
- システム内更新日: 2021-11-25 15:33:48.028033
- Title: SPCL: A New Framework for Domain Adaptive Semantic Segmentation via
Semantic Prototype-based Contrastive Learning
- Title(参考訳): spcl: 意味プロトタイプに基づくコントラスト学習によるドメイン適応意味セグメンテーションのための新しいフレームワーク
- Authors: Binhui Xie, Kejia Yin, Shuang Li and Xinjing Chen
- Abstract要約: ドメイン適応は、ラベル付けされたソースドメインからラベル付けされていないターゲットドメインに知識を転送するのに役立ちます。
本稿では,クラスアライメントを微粒化するための新しい意味的プロトタイプに基づくコントラスト学習フレームワークを提案する。
我々の手法は実装が容易であり、最先端の手法と比較して優れた結果が得られる。
- 参考スコア(独自算出の注目度): 6.705297811617307
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Although there is significant progress in supervised semantic segmentation,
it remains challenging to deploy the segmentation models to unseen domains due
to domain biases. Domain adaptation can help in this regard by transferring
knowledge from a labeled source domain to an unlabeled target domain. Previous
methods typically attempt to perform the adaptation on global features,
however, the local semantic affiliations accounting for each pixel in the
feature space are often ignored, resulting in less discriminability. To solve
this issue, we propose a novel semantic prototype-based contrastive learning
framework for fine-grained class alignment. Specifically, the semantic
prototypes provide supervisory signals for per-pixel discriminative
representation learning and each pixel of source and target domains in the
feature space is required to reflect the content of the corresponding semantic
prototype. In this way, our framework is able to explicitly make intra-class
pixel representations closer and inter-class pixel representations further
apart to improve the robustness of the segmentation model as well as alleviate
the domain shift problem. Our method is easy to implement and attains superior
results compared to state-of-the-art approaches, as is demonstrated with a
number of experiments. The code is publicly available at [this https
URL](https://github.com/BinhuiXie/SPCL).
- Abstract(参考訳): セマンティックセグメンテーションには大きな進歩があるが、ドメインバイアスのため、セマンティックセグメンテーションモデルを目に見えない領域に展開することは依然として困難である。
ドメイン適応は、ラベル付きソースドメインからラベルなしのターゲットドメインに知識を転送することによって、この点において役立つ。
従来はグローバルな特徴への適応を試みてきたが、特徴空間の各ピクセルの局所的なセマンティックアフィリエイトは無視されることが多く、識別性が低下する。
そこで本研究では,クラスアライメントを微粒化するための新しい意味的プロトタイプベースコントラスト学習フレームワークを提案する。
具体的には、意味プロトタイプが画素単位の判別表現学習のための監督信号を提供し、対応する意味プロトタイプの内容を反映して、特徴空間内のソースおよびターゲットドメインの各画素が要求される。
このようにして、我々のフレームワークは、セグメンテーションモデルの堅牢性を向上し、ドメインシフト問題を緩和するために、クラス内ピクセル表現とクラス間ピクセル表現をより明確に分離することができる。
本手法は実装が容易であり,多くの実験で示されるように,最先端手法に比べて優れた結果が得られる。
コードは[このhttps URL](https://github.com/BinhuiXie/SPCL)で公開されている。
関連論文リスト
- Pixel-Level Domain Adaptation: A New Perspective for Enhancing Weakly Supervised Semantic Segmentation [13.948425538725138]
画素単位の領域不変性を学習する際のモデルとして,Pixel-Level Domain Adaptation (PLDA)法を提案する。
我々は,幅広い環境下でのアプローチの有効性を実験的に実証した。
論文 参考訳(メタデータ) (2024-08-04T14:14:54Z) - SSA-Seg: Semantic and Spatial Adaptive Pixel-level Classifier for Semantic Segmentation [11.176993272867396]
本稿ではセマンティック・空間適応(SSA-Seg)を提案し,セマンティックセグメンテーションの課題に対処する。
具体的には、固定されたプロトタイプから得られた粗いマスクを用いて、テスト画像のセマンティック領域と空間領域の中心に向けて固定されたプロトタイプを調整する。
その結果,提案したSSA-Segは,計算コストを最小限に抑えながら,ベースラインモデルのセグメンテーション性能を著しく向上させることがわかった。
論文 参考訳(メタデータ) (2024-05-10T15:14:23Z) - Bi-directional Contrastive Learning for Domain Adaptive Semantic
Segmentation [29.573404843110836]
ドメイン適応セマンティックセマンティックセグメンテーションの鍵は、ターゲットとなる接地木ラベルなしでドメイン不変性と識別的特徴を学習することである。
本稿では,同じオブジェクトクラスにおける特徴のクラス内変動を最小限に抑える,双方向の画素プロトタイプ型コントラスト学習フレームワークを提案する。
論文 参考訳(メタデータ) (2022-07-22T05:57:54Z) - SePiCo: Semantic-Guided Pixel Contrast for Domain Adaptive Semantic
Segmentation [52.62441404064957]
ドメイン適応セマンティックセグメンテーションは、ラベル付きソースドメインでトレーニングされたモデルを利用することで、ラベル付きターゲットドメイン上で満足のいく密度の予測を試みる。
多くの手法は、ノイズの多い擬似ラベルを緩和する傾向があるが、類似のセマンティックな概念を持つクロスドメインピクセル間の固有の接続を無視する。
本稿では,個々の画素のセマンティックな概念を強調する一段階適応フレームワークSePiCoを提案する。
論文 参考訳(メタデータ) (2022-04-19T11:16:29Z) - Domain Adaptive Semantic Segmentation without Source Data [50.18389578589789]
モデルがソースドメイン上で事前学習されていることを前提として、ソースデータのないドメイン適応セマンティックセマンティックセマンティックセマンティクスについて検討する。
本稿では,この課題に対して,肯定的学習と否定的学習という2つの要素を用いた効果的な枠組みを提案する。
私たちのフレームワークは、パフォーマンスをさらに向上するために、他のメソッドに簡単に実装および組み込むことができます。
論文 参考訳(メタデータ) (2021-10-13T04:12:27Z) - AFAN: Augmented Feature Alignment Network for Cross-Domain Object
Detection [90.18752912204778]
オブジェクト検出のための教師なしドメイン適応は、多くの現実世界のアプリケーションにおいて難しい問題である。
本稿では、中間領域画像生成とドメイン・アドバイザリー・トレーニングを統合した新しい機能アライメント・ネットワーク(AFAN)を提案する。
提案手法は、類似および異種ドメイン適応の双方において、標準ベンチマークにおける最先端の手法よりも大幅に優れている。
論文 参考訳(メタデータ) (2021-06-10T05:01:20Z) - Semantic Distribution-aware Contrastive Adaptation for Semantic
Segmentation [50.621269117524925]
ドメイン適応セマンティックセグメンテーション(ドメイン適応セマンティックセグメンテーション)とは、特定のソースドメインのアノテーションだけで特定のターゲットドメイン上で予測を行うことを指す。
画素ワイド表示アライメントを可能にする意味分布対応コントラスト適応アルゴリズムを提案する。
複数のベンチマークでSDCAを評価し、既存のアルゴリズムを大幅に改善します。
論文 参考訳(メタデータ) (2021-05-11T13:21:25Z) - Pixel-Level Cycle Association: A New Perspective for Domain Adaptive
Semantic Segmentation [169.82760468633236]
本稿では,ソースとターゲットの画素ペア間の画素レベルサイクルの関連性を構築することを提案する。
我々の手法は1段階のエンドツーエンドで訓練でき、追加のパラメータは導入しない。
論文 参考訳(メタデータ) (2020-10-31T00:11:36Z) - Affinity Space Adaptation for Semantic Segmentation Across Domains [57.31113934195595]
本稿では,意味的セグメンテーションにおける教師なしドメイン適応(UDA)の問題に対処する。
ソースドメインとターゲットドメインが不変なセマンティック構造を持つという事実に触発され、ドメイン間におけるそのような不変性を活用することを提案する。
親和性空間適応戦略として,親和性空間の洗浄と親和性空間アライメントという2つの方法を開発した。
論文 参考訳(メタデータ) (2020-09-26T10:28:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。