論文の概要: DGSS : Domain Generalized Semantic Segmentation using Iterative Style
Mining and Latent Representation Alignment
- arxiv url: http://arxiv.org/abs/2202.13144v1
- Date: Sat, 26 Feb 2022 13:54:57 GMT
- ステータス: 処理完了
- システム内更新日: 2022-03-01 14:24:32.153635
- Title: DGSS : Domain Generalized Semantic Segmentation using Iterative Style
Mining and Latent Representation Alignment
- Title(参考訳): dgss : 反復型マイニングと潜在表現アライメントを用いたドメイン一般化意味セグメンテーション
- Authors: Pranjay Shyam, Antyanta Bangunharcana, Kuk-Jin Yoon and Kyung-Soo Kim
- Abstract要約: 現在の最先端技術 (SoTA) では、領域ギャップを埋める異なるメカニズムが提案されているが、低い照明条件下では性能が良くない。
本稿では、まず、スタイリングされた画像とソース画像のドメインギャップを最大化する対角的スタイルを識別する2段階のフレームワークを提案する。
そこで我々は,異なるスタイルの同一物体を混合して新たな訓練画像を構築するスタイル混合機構を提案する。
- 参考スコア(独自算出の注目度): 38.05196030226661
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Semantic segmentation algorithms require access to well-annotated datasets
captured under diverse illumination conditions to ensure consistent
performance. However, poor visibility conditions at varying illumination
conditions result in laborious and error-prone labeling. Alternatively, using
synthetic samples to train segmentation algorithms has gained interest with the
drawback of domain gap that results in sub-optimal performance. While current
state-of-the-art (SoTA) have proposed different mechanisms to bridge the domain
gap, they still perform poorly in low illumination conditions with an average
performance drop of - 10.7 mIOU. In this paper, we focus upon single source
domain generalization to overcome the domain gap and propose a two-step
framework wherein we first identify an adversarial style that maximizes the
domain gap between stylized and source images. Subsequently, these stylized
images are used to categorically align features such that features belonging to
the same class are clustered together in latent space, irrespective of domain
gap. Furthermore, to increase intra-class variance while training, we propose a
style mixing mechanism wherein the same objects from different styles are mixed
to construct a new training image. This framework allows us to achieve a domain
generalized semantic segmentation algorithm with consistent performance without
prior information of the target domain while relying on a single source. Based
on extensive experiments, we match SoTA performance on SYNTHIA $\to$
Cityscapes, GTAV $\to$ Cityscapes while setting new SoTA on GTAV $\to$ Dark
Zurich and GTAV $\to$ Night Driving benchmarks without retraining.
- Abstract(参考訳): セマンティックセグメンテーションアルゴリズムは、一貫性のあるパフォーマンスを確保するために、様々な照明条件下でキャプチャされたよく注釈付けられたデータセットにアクセスする必要がある。
しかし、様々な照明条件における視認性の低下は、手間とエラーが発生しやすいラベリングをもたらす。
あるいは、合成サンプルを用いてセグメンテーションアルゴリズムを訓練することは、準最適性能をもたらす領域ギャップの欠点に注目されている。
現在の SoTA (State-of-the-art) では、領域ギャップを埋める様々なメカニズムを提案しているが、照度が低く、平均的な性能低下は - 10.7 mIOU である。
本稿では,ドメインギャップを克服するための単一ソース領域の一般化に着目し,まず,スタイル化とソースイメージのドメインギャップを最大化する対角的スタイルを識別する2段階のフレームワークを提案する。
その後、これらのスタイル化された画像は、ドメイン間隙に関係なく、同じクラスに属する特徴が潜在空間にまとめられるような特徴を分類的に整列するために使用される。
さらに,学習中にクラス内分散を増大させるため,異なるスタイルの同一物体を混合して新たな訓練画像を構築する方式を提案する。
このフレームワークにより、単一のソースに依存しながら、対象領域の事前情報なしで一貫した性能を持つドメイン一般化セマンティックセグメンテーションアルゴリズムを実現することができる。
大規模な実験に基づいて、私たちはSynTHIA $\to$ Cityscapes、GTAV $\to$ CityscapesでSoTAのパフォーマンスをマッチさせ、GTAV $\to$ Dark ZurichとGTAV $\to$ Night Drivingベンチマークで新しいSoTAを設定する。
関連論文リスト
- Compositional Semantic Mix for Domain Adaptation in Point Cloud
Segmentation [65.78246406460305]
合成意味混合は、ポイントクラウドセグメンテーションのための最初の教師なし領域適応技術である。
本稿では、ソースドメイン(例えば合成)からの点雲とターゲットドメイン(例えば実世界)からの点雲を同時に処理できる2分岐対称ネットワークアーキテクチャを提案する。
論文 参考訳(メタデータ) (2023-08-28T14:43:36Z) - I2F: A Unified Image-to-Feature Approach for Domain Adaptive Semantic
Segmentation [55.633859439375044]
意味的セグメンテーションのための教師なしドメイン適応(UDA)は、重いアノテーション作業から人々を解放する有望なタスクである。
この問題に対処する主要なアイデアは、画像レベルと特徴レベルの両方を共同で実行することである。
本稿では,画像レベルと特徴レベルを統一したセマンティックセグメンテーションのための新しいUDAパイプラインを提案する。
論文 参考訳(メタデータ) (2023-01-03T15:19:48Z) - Unsupervised Contrastive Domain Adaptation for Semantic Segmentation [75.37470873764855]
クロスドメイン適応における特徴アライメントのためのコントラスト学習を導入する。
提案手法は、ドメイン適応のための最先端手法を一貫して上回る。
Cityscapesデータセットで60.2% mIoUを達成した。
論文 参考訳(メタデータ) (2022-04-18T16:50:46Z) - SPCL: A New Framework for Domain Adaptive Semantic Segmentation via
Semantic Prototype-based Contrastive Learning [6.705297811617307]
ドメイン適応は、ラベル付けされたソースドメインからラベル付けされていないターゲットドメインに知識を転送するのに役立ちます。
本稿では,クラスアライメントを微粒化するための新しい意味的プロトタイプに基づくコントラスト学習フレームワークを提案する。
我々の手法は実装が容易であり、最先端の手法と比較して優れた結果が得られる。
論文 参考訳(メタデータ) (2021-11-24T09:26:07Z) - Semantic Distribution-aware Contrastive Adaptation for Semantic
Segmentation [50.621269117524925]
ドメイン適応セマンティックセグメンテーション(ドメイン適応セマンティックセグメンテーション)とは、特定のソースドメインのアノテーションだけで特定のターゲットドメイン上で予測を行うことを指す。
画素ワイド表示アライメントを可能にする意味分布対応コントラスト適応アルゴリズムを提案する。
複数のベンチマークでSDCAを評価し、既存のアルゴリズムを大幅に改善します。
論文 参考訳(メタデータ) (2021-05-11T13:21:25Z) - More Separable and Easier to Segment: A Cluster Alignment Method for
Cross-Domain Semantic Segmentation [41.81843755299211]
上記の問題を緩和するために,ドメイン仮定の近接性に基づく新しいUDAセマンティックセマンティックセマンティクス手法を提案する。
具体的には、同じ意味を持つクラスタピクセルにプロトタイプクラスタリング戦略を適用し、ターゲットドメインピクセル間の関連付けをより良く維持します。
GTA5とSynthiaで行った実験は,本法の有効性を実証した。
論文 参考訳(メタデータ) (2021-05-07T10:24:18Z) - Pixel-Level Cycle Association: A New Perspective for Domain Adaptive
Semantic Segmentation [169.82760468633236]
本稿では,ソースとターゲットの画素ペア間の画素レベルサイクルの関連性を構築することを提案する。
我々の手法は1段階のエンドツーエンドで訓練でき、追加のパラメータは導入しない。
論文 参考訳(メタデータ) (2020-10-31T00:11:36Z) - Differential Treatment for Stuff and Things: A Simple Unsupervised
Domain Adaptation Method for Semantic Segmentation [105.96860932833759]
最先端のアプローチは、セマンティックレベルのアライメントの実行がドメインシフトの問題に取り組むのに役立つことを証明している。
我々は,物事領域や物事に対する異なる戦略による意味レベルのアライメントを改善することを提案する。
提案手法に加えて,提案手法は,ソースとターゲットドメイン間の最も類似した機能やインスタンス機能を最小化することにより,この問題の緩和に有効であることを示す。
論文 参考訳(メタデータ) (2020-03-18T04:43:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。