論文の概要: Exploiting Inter-pixel Correlations in Unsupervised Domain Adaptation
for Semantic Segmentation
- arxiv url: http://arxiv.org/abs/2110.10916v1
- Date: Thu, 21 Oct 2021 06:11:44 GMT
- ステータス: 処理完了
- システム内更新日: 2021-10-22 17:12:37.170494
- Title: Exploiting Inter-pixel Correlations in Unsupervised Domain Adaptation
for Semantic Segmentation
- Title(参考訳): セマンティックセグメンテーションのための教師なし領域適応における画素間相関の爆発
- Authors: Inseop Chung, Jayeon Yoo, Nojun Kwak
- Abstract要約: 自己学習」は、教師なしドメイン適応(UDA)によるセマンティックセグメンテーションの主流となる。
本稿では,ソースドメインから自己アテンションモジュールを介して対象ドメインへの画素間相関を転送する方法を提案する。
- 参考スコア(独自算出の注目度): 32.71144601174794
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: "Self-training" has become a dominant method for semantic segmentation via
unsupervised domain adaptation (UDA). It creates a set of pseudo labels for the
target domain to give explicit supervision. However, the pseudo labels are
noisy, sparse and do not provide any information about inter-pixel
correlations. We regard inter-pixel correlation quite important because
semantic segmentation is a task of predicting highly structured pixel-level
outputs. Therefore, in this paper, we propose a method of transferring the
inter-pixel correlations from the source domain to the target domain via a
self-attention module. The module takes the prediction of the segmentation
network as an input and creates a self-attended prediction that correlates
similar pixels. The module is trained only on the source domain to learn the
domain-invariant inter-pixel correlations, then later, it is used to train the
segmentation network on the target domain. The network learns not only from the
pseudo labels but also by following the output of the self-attention module
which provides additional knowledge about the inter-pixel correlations. Through
extensive experiments, we show that our method significantly improves the
performance on two standard UDA benchmarks and also can be combined with recent
state-of-the-art method to achieve better performance.
- Abstract(参考訳): 自己学習」は、教師なしドメイン適応(UDA)によるセマンティックセグメンテーションの主流となっている。
明示的な監督を与えるために、ターゲットドメインの擬似ラベルのセットを生成する。
しかし、擬似ラベルはノイズが多く、スパースであり、画素間相関に関する情報を提供していない。
意味セグメンテーションは高度に構造化された画素レベルの出力を予測するタスクであるため,画素間相関は非常に重要である。
そこで本稿では,本研究では,自己アテンションモジュールを用いて,画素間相関関係をソースドメインからターゲットドメインに転送する方法を提案する。
このモジュールはセグメンテーションネットワークの予測を入力として、類似のピクセルを関連付ける自己修正予測を生成する。
モジュールはソースドメインでのみトレーニングされ、ドメイン不変の画素間相関を学習し、その後、ターゲットドメイン上のセグメンテーションネットワークをトレーニングするために使用される。
ネットワークは疑似ラベルからだけでなく、ピクセル間の相関に関する追加の知識を提供するセルフアテンションモジュールの出力にも従って学習する。
広範にわたる実験により,本手法は2つの標準UDAベンチマークの性能を著しく向上させるとともに,最新の最先端手法と組み合わせて性能向上を図ることができることを示した。
関連論文リスト
- SiamSeg: Self-Training with Contrastive Learning for Unsupervised Domain Adaptation Semantic Segmentation in Remote Sensing [14.007392647145448]
UDAは、ラベル付きソースドメインデータをトレーニングしながら、ラベルなしのターゲットドメインデータからモデルを学習することを可能にする。
コントラスト学習を UDA に統合し,セマンティック情報を取得する能力を向上させることを提案する。
我々のSimSegメソッドは既存の手法より優れ、最先端の結果が得られます。
論文 参考訳(メタデータ) (2024-10-17T11:59:39Z) - PiPa++: Towards Unification of Domain Adaptive Semantic Segmentation via Self-supervised Learning [34.786268652516355]
教師なしドメイン適応セグメンテーションは、それらのドメインのラベル付きデータに頼ることなく、ターゲットドメイン上のモデルのセグメンテーション精度を向上させることを目的としている。
ソースドメイン(ラベル付きデータが利用可能な場所)とターゲットドメイン(ラベルなしデータのみが存在する場所)の特徴表現の整合を図る。
論文 参考訳(メタデータ) (2024-07-24T08:53:29Z) - Semantic Connectivity-Driven Pseudo-labeling for Cross-domain
Segmentation [89.41179071022121]
自己学習はドメイン間セマンティックセグメンテーションにおいて一般的なアプローチである。
本稿ではセマンティック・コネクティビティ駆動の擬似ラベル方式を提案する。
このアプローチは、接続レベルにおいて擬似ラベルを定式化し、構造的および低雑音のセマンティクスの学習を容易にする。
論文 参考訳(メタデータ) (2023-12-11T12:29:51Z) - PiPa: Pixel- and Patch-wise Self-supervised Learning for Domain
Adaptative Semantic Segmentation [100.6343963798169]
教師なしドメイン適応(Unsupervised Domain Adaptation, UDA)は、学習モデルの他のドメインへの一般化を強化することを目的としている。
そこで我々は,ドメイン適応型セマンティックセマンティックセグメンテーションのための,PiPaという,画素・パッチ対応の自己教師付き学習フレームワークを提案する。
論文 参考訳(メタデータ) (2022-11-14T18:31:24Z) - DecoupleNet: Decoupled Network for Domain Adaptive Semantic Segmentation [78.30720731968135]
セマンティックセグメンテーションにおける教師なしドメイン適応は、高価なピクセル単位のアノテーションへの依存を軽減するために提起されている。
我々は、ソースドメインのオーバーフィットを軽減し、最終的なモデルをセグメント化タスクに集中できるようにするDecoupleNetを提案する。
我々はまた、自己識別(SD)を推進し、擬似ラベルでより識別可能なターゲットドメイン特徴を学習するための補助分類器を導入した。
論文 参考訳(メタデータ) (2022-07-20T15:47:34Z) - SPCL: A New Framework for Domain Adaptive Semantic Segmentation via
Semantic Prototype-based Contrastive Learning [6.705297811617307]
ドメイン適応は、ラベル付けされたソースドメインからラベル付けされていないターゲットドメインに知識を転送するのに役立ちます。
本稿では,クラスアライメントを微粒化するための新しい意味的プロトタイプに基づくコントラスト学習フレームワークを提案する。
我々の手法は実装が容易であり、最先端の手法と比較して優れた結果が得られる。
論文 参考訳(メタデータ) (2021-11-24T09:26:07Z) - Semantic Distribution-aware Contrastive Adaptation for Semantic
Segmentation [50.621269117524925]
ドメイン適応セマンティックセグメンテーション(ドメイン適応セマンティックセグメンテーション)とは、特定のソースドメインのアノテーションだけで特定のターゲットドメイン上で予測を行うことを指す。
画素ワイド表示アライメントを可能にする意味分布対応コントラスト適応アルゴリズムを提案する。
複数のベンチマークでSDCAを評価し、既存のアルゴリズムを大幅に改善します。
論文 参考訳(メタデータ) (2021-05-11T13:21:25Z) - More Separable and Easier to Segment: A Cluster Alignment Method for
Cross-Domain Semantic Segmentation [41.81843755299211]
上記の問題を緩和するために,ドメイン仮定の近接性に基づく新しいUDAセマンティックセマンティックセマンティクス手法を提案する。
具体的には、同じ意味を持つクラスタピクセルにプロトタイプクラスタリング戦略を適用し、ターゲットドメインピクセル間の関連付けをより良く維持します。
GTA5とSynthiaで行った実験は,本法の有効性を実証した。
論文 参考訳(メタデータ) (2021-05-07T10:24:18Z) - Pixel-Level Cycle Association: A New Perspective for Domain Adaptive
Semantic Segmentation [169.82760468633236]
本稿では,ソースとターゲットの画素ペア間の画素レベルサイクルの関連性を構築することを提案する。
我々の手法は1段階のエンドツーエンドで訓練でき、追加のパラメータは導入しない。
論文 参考訳(メタデータ) (2020-10-31T00:11:36Z) - Affinity Space Adaptation for Semantic Segmentation Across Domains [57.31113934195595]
本稿では,意味的セグメンテーションにおける教師なしドメイン適応(UDA)の問題に対処する。
ソースドメインとターゲットドメインが不変なセマンティック構造を持つという事実に触発され、ドメイン間におけるそのような不変性を活用することを提案する。
親和性空間適応戦略として,親和性空間の洗浄と親和性空間アライメントという2つの方法を開発した。
論文 参考訳(メタデータ) (2020-09-26T10:28:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。