論文の概要: Domain Adaptive Semantic Segmentation with Regional Contrastive
Consistency Regularization
- arxiv url: http://arxiv.org/abs/2110.05170v1
- Date: Mon, 11 Oct 2021 11:45:00 GMT
- ステータス: 処理完了
- システム内更新日: 2021-10-12 18:32:29.560659
- Title: Domain Adaptive Semantic Segmentation with Regional Contrastive
Consistency Regularization
- Title(参考訳): 領域適応型セマンティックセマンティックセマンティックセグメンテーションと地域整合性規則化
- Authors: Qianyu Zhou, Chuyun Zhuang, Xuequan Lu, Lizhuang Ma
- Abstract要約: 本稿では,領域適応型セマンティックセマンティックセグメンテーションのための局所コントラスト整合正規化(RCCR)と呼ばれる,新しいエンドツーエンドのトレーニング可能なアプローチを提案する。
私たちの中核となる考え方は、異なる画像の同じ位置から抽出された類似の地域的特徴を取り除き、その一方、2つの画像の異なる位置から特徴を分離することです。
- 参考スコア(独自算出の注目度): 19.279884432843822
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Unsupervised domain adaptation (UDA) aims to bridge the domain shift between
the labeled source domain and the unlabeled target domain. However, most
existing works perform the global-level feature alignment for semantic
segmentation, while the local consistency between the regions has been largely
neglected, and these methods are less robust to changing of outdoor
environments. Motivated by the above facts, we propose a novel and fully
end-to-end trainable approach, called regional contrastive consistency
regularization (RCCR) for domain adaptive semantic segmentation. Our core idea
is to pull the similar regional features extracted from the same location of
different images to be closer, and meanwhile push the features from the
different locations of the two images to be separated. We innovatively propose
momentum projector heads, where the teacher projector is the exponential moving
average of the student. Besides, we present a region-wise contrastive loss with
two sampling strategies to realize effective regional consistency. Finally, a
memory bank mechanism is designed to learn more robust and stable region-wise
features under varying environments. Extensive experiments on two common UDA
benchmarks, i.e., GTAV to Cityscapes and SYNTHIA to Cityscapes, demonstrate
that our approach outperforms the state-of-the-art methods.
- Abstract(参考訳): Unsupervised domain adapt (UDA) は、ラベル付きソースドメインとラベルなしターゲットドメインの間のドメインシフトをブリッジすることを目的としている。
しかし、既存の作品の多くはセマンティックセグメンテーションのためのグローバルレベルの機能アライメントを実行しているが、地域間の局所的な一貫性はほとんど無視されている。
そこで本研究では,領域適応型セマンティックセマンティックセグメンテーションのためのRCCR(Regional contrastive consistency regularization)と呼ばれる,新しいエンドツーエンドのトレーニング可能なアプローチを提案する。
私たちの中核となる考え方は、異なる画像の同じ位置から抽出された類似の地域的特徴を取り除き、その一方、2つの画像の異なる位置から特徴を分離することです。
本研究では,教師プロジェクタが学生の指数移動平均となる運動量プロジェクタヘッドを提案する。
また,地域的一貫性を実現するために,2つのサンプリング戦略による領域的対比損失を提案する。
最後に、メモリバンク機構は、様々な環境下でより堅牢で安定した地域機能を学ぶように設計されている。
GTAVをCityscapesに、SynTHIAをCityscapesに、という2つの一般的なUDAベンチマークに対する大規模な実験は、我々のアプローチが最先端の手法よりも優れていることを示した。
関連論文リスト
- PiPa++: Towards Unification of Domain Adaptive Semantic Segmentation via Self-supervised Learning [34.786268652516355]
教師なしドメイン適応セグメンテーションは、それらのドメインのラベル付きデータに頼ることなく、ターゲットドメイン上のモデルのセグメンテーション精度を向上させることを目的としている。
ソースドメイン(ラベル付きデータが利用可能な場所)とターゲットドメイン(ラベルなしデータのみが存在する場所)の特徴表現の整合を図る。
論文 参考訳(メタデータ) (2024-07-24T08:53:29Z) - Bidirectional Domain Mixup for Domain Adaptive Semantic Segmentation [73.3083304858763]
本稿では,ドメイン適応型セマンティックセグメンテーションタスクにおけるミックスアップの影響を系統的に研究する。
具体的には、ドメインミックスアップをカットとペーストという2ステップで実現します。
フレームワークの主なコンポーネントを実証的に検証するために、広範囲にわたるアブレーション実験を行います。
論文 参考訳(メタデータ) (2023-03-17T05:22:44Z) - Exploring Consistency in Cross-Domain Transformer for Domain Adaptive
Semantic Segmentation [51.10389829070684]
ドメインギャップは、自己注意の相違を引き起こす可能性がある。
このギャップのため、変圧器は、ターゲット領域の精度を低下させる刺激領域または画素に付随する。
ドメイン横断の注意層を持つアテンションマップに適応する。
論文 参考訳(メタデータ) (2022-11-27T02:40:33Z) - Curriculum-style Local-to-global Adaptation for Cross-domain Remote
Sensing Image Segmentation [11.650285884518208]
超高解像度(VHR)リモートセンシング画像(RSI)のクロスドメインセグメンテーションは2つの重要な課題に直面している。
多くの多様な対象カテゴリを持つ広い面積の土地は、深刻な局所的なパッチレベルのデータ分布のずれをもたらしている。
異なるVHRセンサタイプや動的に変化するモードは、同じ地理的位置であっても、VHRイメージが集中的なデータ分散の差を通り抜ける原因となる。
本稿では,VHR RSIのセグメンテーションのためのカリキュラム型ローカル・グローバル・クロスドメイン適応フレームワークを提案する。
論文 参考訳(メタデータ) (2022-03-03T06:33:46Z) - Region-Based Semantic Factorization in GANs [67.90498535507106]
本稿では,任意の画像領域についてGAN(Generative Adversarial Networks)が学習した潜在意味を分解するアルゴリズムを提案する。
適切に定義された一般化されたレイリー商を通して、アノテーションや訓練なしにそのような問題を解く。
様々な最先端のGANモデルに対する実験結果から,本手法の有効性が示された。
論文 参考訳(メタデータ) (2022-02-19T17:46:02Z) - Towards Fewer Annotations: Active Learning via Region Impurity and
Prediction Uncertainty for Domain Adaptive Semantic Segmentation [19.55572909866489]
ドメインシフトに基づく意味的セグメンテーションのための領域ベースアクティブラーニング手法を提案する。
領域不純物・予測不確かさ(AL-RIPU)を用いた能動学習では,画像領域の空間的隣接性を特徴付ける新たな獲得戦略が導入された。
我々の手法は、教師付きパフォーマンスにほぼ到達するためにはほとんどアノテーションを必要とせず、最先端の手法よりも大幅に優れています。
論文 参考訳(メタデータ) (2021-11-25T06:40:58Z) - MLAN: Multi-Level Adversarial Network for Domain Adaptive Semantic
Segmentation [32.77436219094282]
本稿では,領域間不整合を大域画像レベルと局所領域レベルで最適に扱うことを目的とした,MLAN(Multi-level adversarial Network)を提案する。
MLANは2つの新しい設計、すなわち、地域レベルの対角学習(RL-AL)と共正規化された対角学習(CR-AL)を持つ。
広範な実験は、MLANが複数のデータセットにまたがる大きなマージンで最先端のものを上回ることを示しています。
論文 参考訳(メタデータ) (2021-03-24T05:13:23Z) - Margin Preserving Self-paced Contrastive Learning Towards Domain
Adaptation for Medical Image Segmentation [51.93711960601973]
クロスモーダル医療画像セグメンテーションのための自己ペースコントラスト学習モデルを保存する新しいマージンを提案する。
プログレッシブに洗練されたセマンティックプロトタイプの指導により、埋め込み表現空間の識別性を高めるために、コントラスト損失を減少させる新しいマージンが提案される。
クロスモーダル心セグメンテーションタスクの実験は、MPSCLが意味セグメンテーション性能を大幅に改善することを示した。
論文 参考訳(メタデータ) (2021-03-15T15:23:10Z) - Contextual-Relation Consistent Domain Adaptation for Semantic
Segmentation [44.19436340246248]
本稿では,革新的局所文脈相関整合ドメイン適応手法を提案する。
グローバルレベルのアライメントにおいて、地域レベルのコンピテンシーを達成することを目的としている。
実験では, 最先端手法と比較して, セグメンテーション性能が優れていることを示した。
論文 参考訳(メタデータ) (2020-07-05T19:00:46Z) - Domain Conditioned Adaptation Network [90.63261870610211]
本稿では,ドメイン条件付きチャネルアテンション機構を用いて,異なる畳み込みチャネルを励起するドメイン条件適応ネットワーク(DCAN)を提案する。
これは、ディープDAネットワークのドメインワイドな畳み込みチャネルアクティベーションを探求する最初の試みである。
論文 参考訳(メタデータ) (2020-05-14T04:23:24Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。