論文の概要: Coarse-to-Fine Domain Adaptive Semantic Segmentation with Photometric
Alignment and Category-Center Regularization
- arxiv url: http://arxiv.org/abs/2103.13041v1
- Date: Wed, 24 Mar 2021 08:04:08 GMT
- ステータス: 処理完了
- システム内更新日: 2021-03-25 13:59:36.535670
- Title: Coarse-to-Fine Domain Adaptive Semantic Segmentation with Photometric
Alignment and Category-Center Regularization
- Title(参考訳): 測光アライメントとカテゴリ中心正則化を用いた粗細領域適応意味セグメンテーション
- Authors: Haoyu Ma, Xiangru Lin, Zifeng Wu, Yizhou Yu
- Abstract要約: 画像レベルのアライメントとカテゴリレベルの特徴分布の正規化を粗い方法で統一する新しいUDAパイプラインを提案する。
実験の結果,提案するパイプラインは最終セグメンテーションモデルの一般化能力を向上させることがわかった。
- 参考スコア(独自算出の注目度): 42.25246413410471
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Unsupervised domain adaptation (UDA) in semantic segmentation is a
fundamental yet promising task relieving the need for laborious annotation
works. However, the domain shifts/discrepancies problem in this task compromise
the final segmentation performance. Based on our observation, the main causes
of the domain shifts are differences in imaging conditions, called image-level
domain shifts, and differences in object category configurations called
category-level domain shifts. In this paper, we propose a novel UDA pipeline
that unifies image-level alignment and category-level feature distribution
regularization in a coarse-to-fine manner. Specifically, on the coarse side, we
propose a photometric alignment module that aligns an image in the source
domain with a reference image from the target domain using a set of image-level
operators; on the fine side, we propose a category-oriented triplet loss that
imposes a soft constraint to regularize category centers in the source domain
and a self-supervised consistency regularization method in the target domain.
Experimental results show that our proposed pipeline improves the
generalization capability of the final segmentation model and significantly
outperforms all previous state-of-the-arts.
- Abstract(参考訳): セマンティックセグメンテーションにおける教師なしドメイン適応(UDA)は、退屈なアノテーション作業の必要性を緩和する基本的かつ有望なタスクである。
しかし、このタスクにおけるドメインシフト/分散問題は、最終的なセグメンテーション性能を損なう。
以上より,領域シフトの主な原因は,画像レベルの領域シフトと呼ばれる画像条件の違いと,カテゴリレベルの領域シフトと呼ばれるオブジェクトカテゴリ構成の違いである。
本稿では,画像レベルのアライメントとカテゴリレベルの特徴分布の正規化を粗い方法で統一する新しいUDAパイプラインを提案する。
具体的には、粗い側では、画像レベルの演算子を用いて、ソースドメイン内の画像と対象ドメインからの参照画像とを整列する測光アライメントモジュールを提案し、細部では、ソースドメイン内のカテゴリ中心を正則化するためのソフト制約を課すカテゴリ指向の三重項損失と、ターゲットドメイン内の自己監督整合正則化法を提案する。
実験の結果,提案パイプラインは最終セグメンテーションモデルの一般化能力が向上し,従来よりも大幅に向上することがわかった。
関連論文リスト
- I2F: A Unified Image-to-Feature Approach for Domain Adaptive Semantic
Segmentation [55.633859439375044]
意味的セグメンテーションのための教師なしドメイン適応(UDA)は、重いアノテーション作業から人々を解放する有望なタスクである。
この問題に対処する主要なアイデアは、画像レベルと特徴レベルの両方を共同で実行することである。
本稿では,画像レベルと特徴レベルを統一したセマンティックセグメンテーションのための新しいUDAパイプラインを提案する。
論文 参考訳(メタデータ) (2023-01-03T15:19:48Z) - Unsupervised Domain Adaptation for Semantic Segmentation using One-shot
Image-to-Image Translation via Latent Representation Mixing [9.118706387430883]
超高解像度画像のセマンティックセグメンテーションのための新しい教師なし領域適応法を提案する。
潜在コンテンツ表現をドメイン間で混合するエンコーダ・デコーダの原理に基づいて,画像から画像への変換パラダイムを提案する。
都市間比較実験により,提案手法は最先端領域適応法より優れていることが示された。
論文 参考訳(メタデータ) (2022-12-07T18:16:17Z) - Unsupervised Domain Adaptive Fundus Image Segmentation with
Category-level Regularization [25.58501677242639]
本稿では、カテゴリーレベルの正規化に基づく教師なしドメイン適応フレームワークを提案する。
2つの公開ファンドデータセットの実験により、提案手法は他の最先端比較アルゴリズムよりも大幅に優れていることが示された。
論文 参考訳(メタデータ) (2022-07-08T04:34:39Z) - Style Mixing and Patchwise Prototypical Matching for One-Shot
Unsupervised Domain Adaptive Semantic Segmentation [21.01132797297286]
ワンショットの教師なしドメイン適応では、セグメンタはトレーニング中にラベルなしのターゲットイメージを1つしか見ることができない。
このような計算負担を効果的に軽減できるOSUDA法を提案する。
提案手法は,ドメイン適応型セマンティックセグメンテーションのための2つの一般的なベンチマーク上で,最先端性能を実現する。
論文 参考訳(メタデータ) (2021-12-09T02:47:46Z) - AFAN: Augmented Feature Alignment Network for Cross-Domain Object
Detection [90.18752912204778]
オブジェクト検出のための教師なしドメイン適応は、多くの現実世界のアプリケーションにおいて難しい問題である。
本稿では、中間領域画像生成とドメイン・アドバイザリー・トレーニングを統合した新しい機能アライメント・ネットワーク(AFAN)を提案する。
提案手法は、類似および異種ドメイン適応の双方において、標準ベンチマークにおける最先端の手法よりも大幅に優れている。
論文 参考訳(メタデータ) (2021-06-10T05:01:20Z) - Semantic Distribution-aware Contrastive Adaptation for Semantic
Segmentation [50.621269117524925]
ドメイン適応セマンティックセグメンテーション(ドメイン適応セマンティックセグメンテーション)とは、特定のソースドメインのアノテーションだけで特定のターゲットドメイン上で予測を行うことを指す。
画素ワイド表示アライメントを可能にする意味分布対応コントラスト適応アルゴリズムを提案する。
複数のベンチマークでSDCAを評価し、既存のアルゴリズムを大幅に改善します。
論文 参考訳(メタデータ) (2021-05-11T13:21:25Z) - Cross-Domain Grouping and Alignment for Domain Adaptive Semantic
Segmentation [74.3349233035632]
深層畳み込みニューラルネットワーク(CNN)内のソースドメインとターゲットドメインにセマンティックセグメンテーションネットワークを適用する既存の技術は、対象ドメイン自身や推定カテゴリ内のクラス間変異を考慮していない。
学習可能なクラスタリングモジュールと、クロスドメイングルーピングとアライメントと呼ばれる新しいドメイン適応フレームワークを導入する。
本手法はセマンティクスセグメンテーションにおける適応性能を一貫して向上させ,様々なドメイン適応設定において最先端を上回っている。
論文 参考訳(メタデータ) (2020-12-15T11:36:21Z) - Exploring Categorical Regularization for Domain Adaptive Object
Detection [27.348272177261233]
ドメイン適応オブジェクト検出のための分類規則化フレームワークを提案する。
一連のAdaptive Domain Faster R-CNNメソッドのプラグイン・アンド・プレイコンポーネントとして適用することができる。
提案手法は、元のDomain Adaptive Faster R-CNN検出器よりも優れた性能を得る。
論文 参考訳(メタデータ) (2020-03-20T08:53:10Z) - Differential Treatment for Stuff and Things: A Simple Unsupervised
Domain Adaptation Method for Semantic Segmentation [105.96860932833759]
最先端のアプローチは、セマンティックレベルのアライメントの実行がドメインシフトの問題に取り組むのに役立つことを証明している。
我々は,物事領域や物事に対する異なる戦略による意味レベルのアライメントを改善することを提案する。
提案手法に加えて,提案手法は,ソースとターゲットドメイン間の最も類似した機能やインスタンス機能を最小化することにより,この問題の緩和に有効であることを示す。
論文 参考訳(メタデータ) (2020-03-18T04:43:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。