論文の概要: Unsupervised Domain Adaptation for Mobile Semantic Segmentation based on
Cycle Consistency and Feature Alignment
- arxiv url: http://arxiv.org/abs/2001.04692v2
- Date: Thu, 12 Mar 2020 10:22:43 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-11 12:17:38.380621
- Title: Unsupervised Domain Adaptation for Mobile Semantic Segmentation based on
Cycle Consistency and Feature Alignment
- Title(参考訳): サイクル一貫性と特徴アライメントに基づくモバイル意味セグメンテーションのための教師なしドメイン適応
- Authors: Marco Toldo and Umberto Michieli and Gianluca Agresti and Pietro
Zanuttigh
- Abstract要約: 実世界と合成表現のドメインシフト問題に対処する新しいUnsupervised Domain Adaptation (UDA)戦略を提案する。
提案手法は,合成データに基づいて訓練されたセグメンテーションネットワークを実世界のシナリオに適用することで,優れた性能が得られることを示す。
- 参考スコア(独自算出の注目度): 28.61782696432711
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The supervised training of deep networks for semantic segmentation requires a
huge amount of labeled real world data. To solve this issue, a commonly
exploited workaround is to use synthetic data for training, but deep networks
show a critical performance drop when analyzing data with slightly different
statistical properties with respect to the training set. In this work, we
propose a novel Unsupervised Domain Adaptation (UDA) strategy to address the
domain shift issue between real world and synthetic representations. An
adversarial model, based on the cycle consistency framework, performs the
mapping between the synthetic and real domain. The data is then fed to a
MobileNet-v2 architecture that performs the semantic segmentation task. An
additional couple of discriminators, working at the feature level of the
MobileNet-v2, allows to better align the features of the two domain
distributions and to further improve the performance. Finally, the consistency
of the semantic maps is exploited. After an initial supervised training on
synthetic data, the whole UDA architecture is trained end-to-end considering
all its components at once. Experimental results show how the proposed strategy
is able to obtain impressive performance in adapting a segmentation network
trained on synthetic data to real world scenarios. The usage of the lightweight
MobileNet-v2 architecture allows its deployment on devices with limited
computational resources as the ones employed in autonomous vehicles.
- Abstract(参考訳): セマンティックセグメンテーションのためのディープネットワークの教師付きトレーニングは、膨大な量のラベル付き現実世界データを必要とする。
この問題を解決するために、一般的に利用される回避策は、トレーニングに合成データを使用することであるが、深層ネットワークは、トレーニングセットに関してわずかに異なる統計特性を持つデータを解析する際に、重要な性能低下を示す。
本研究では,実世界と合成表現間の領域シフト問題に対処するために,新しいunsupervised domain adaptation (uda)戦略を提案する。
サイクル整合性フレームワークに基づく逆モデルは、合成ドメインと実ドメインの間のマッピングを実行する。
データはmobilenet-v2アーキテクチャに供給され、セマンティックセグメンテーションタスクを実行する。
MobileNet-v2の機能レベルで作業するさらに2つの差別要因により、2つのドメインディストリビューションの機能の整合性が向上し、パフォーマンスがさらに向上する。
最後に、セマンティックマップの一貫性が悪用される。
合成データの初期教師付きトレーニングの後、UDAアーキテクチャ全体は、すべてのコンポーネントを一度に考慮してエンドツーエンドにトレーニングされる。
実験結果から,合成データに基づくセグメンテーションネットワークを実世界シナリオに適用する上で,提案手法がいかに印象的な性能を得るかを示す。
軽量なmobilenet-v2アーキテクチャを使用することで、自動運転車で使用されるような計算リソースの少ないデバイスへの展開が可能になる。
関連論文リスト
- SALUDA: Surface-based Automotive Lidar Unsupervised Domain Adaptation [62.889835139583965]
我々は、ソースデータとターゲットデータに基づいて、暗黙の基盤となる表面表現を同時に学習する教師なし補助タスクを導入する。
両方のドメインが同じ遅延表現を共有しているため、モデルは2つのデータソース間の不一致を許容せざるを得ない。
実験の結果,本手法は実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-実-
論文 参考訳(メタデータ) (2023-04-06T17:36:23Z) - Domain Adaptation of Synthetic Driving Datasets for Real-World
Autonomous Driving [0.11470070927586014]
特定のコンピュータビジョンタスクのための合成データで訓練されたネットワークは、実世界のデータでテストすると大幅に劣化する。
本稿では,このような手法を改良するための新しい手法を提案し,評価する。
本稿では,このペア選択にセマンティック・インスペクションを効果的に組み込む手法を提案し,モデルの性能向上に寄与する。
論文 参考訳(メタデータ) (2023-02-08T15:51:54Z) - One-Shot Domain Adaptive and Generalizable Semantic Segmentation with
Class-Aware Cross-Domain Transformers [96.51828911883456]
セマンティックセグメンテーションのための教師なしのsim-to-realドメイン適応(UDA)は、シミュレーションデータに基づいて訓練されたモデルの実世界のテスト性能を改善することを目的としている。
従来のUDAは、適応のためのトレーニング中に利用可能なラベルのない実世界のサンプルが豊富にあると仮定することが多い。
実世界のデータサンプルが1つしか利用できない,一発の教師なしシム・トゥ・リアル・ドメイン適応(OSUDA)と一般化問題について検討する。
論文 参考訳(メタデータ) (2022-12-14T15:54:15Z) - Threshold-adaptive Unsupervised Focal Loss for Domain Adaptation of
Semantic Segmentation [25.626882426111198]
意味的セグメンテーションのための教師なしドメイン適応(UDA)は近年研究の注目を集めている。
本稿では,セマンティックセグメンテーションのための2段階エントロピーに基づくUDA手法を提案する。
本稿では,DeepLabV2を用いたSynTHIA-to-CityscapesとGTA5-to-Cityscapesにおける最先端の58.4%と59.6%のmIoUと,軽量BiSeNetを用いた競合性能を実現する。
論文 参考訳(メタデータ) (2022-08-23T03:48:48Z) - ProCST: Boosting Semantic Segmentation using Progressive Cyclic
Style-Transfer [38.03127458140549]
ドメイン適応技術を改善するための新しい2段階フレームワークを提案する。
最初のステップでは、複数のスケールのニューラルネットワークを段階的にトレーニングし、ソースデータからターゲットデータへの初期転送を行う。
この新たなデータは、所望のターゲットドメインとのドメインギャップを減らし、適用されたUDAアプローチにより、さらにギャップを埋める。
論文 参考訳(メタデータ) (2022-04-25T18:01:05Z) - Reimagine BiSeNet for Real-Time Domain Adaptation in Semantic
Segmentation [17.761939190746812]
ドメイン間のリアルタイムセマンティックセグメンテーションの課題について考察する。
我々は、合成領域で訓練されたとしても、実世界のデータに対して適切に行動するようにモデルを訓練する。
私たちは、この目的のために特別に作られた新しい軽量で浅い識別器を採用しています。
論文 参考訳(メタデータ) (2021-10-22T08:39:28Z) - Unsupervised Domain Adaptive Learning via Synthetic Data for Person
Re-identification [101.1886788396803]
人物再識別(re-ID)は、ビデオ監視に広く応用されているため、ますます注目を集めている。
残念なことに、主流のディープラーニング手法では、モデルをトレーニングするために大量のラベル付きデータが必要です。
本稿では,コンピュータゲーム内で合成されたre-IDサンプルを自動的に生成するデータコレクタを開発し,同時にアノテートするデータラベラを構築した。
論文 参考訳(メタデータ) (2021-09-12T15:51:41Z) - Contrastive Learning and Self-Training for Unsupervised Domain
Adaptation in Semantic Segmentation [71.77083272602525]
UDAはラベル付きソースドメインからラベルなしターゲットドメインへの効率的な知識伝達を試みている。
本稿では,領域にまたがるカテゴリ別センタロイドを適応させるコントラスト学習手法を提案する。
提案手法を自己学習で拡張し,メモリ効率の良い時間アンサンブルを用いて一貫性と信頼性の高い擬似ラベルを生成する。
論文 参考訳(メタデータ) (2021-05-05T11:55:53Z) - Unsupervised Domain Adaptation with Multiple Domain Discriminators and
Adaptive Self-Training [22.366638308792734]
Unsupervised Domain Adaptation (UDA)は、ソースドメインでトレーニングされたモデルの一般化能力を改善し、ラベル付きデータが使用できないターゲットドメインでうまく機能することを目的としている。
本稿では、合成データに基づいて訓練されたディープニューラルネットワークを、2つの異なるデータ分布間のドメインシフトに対処する実シーンに適用するアプローチを提案する。
論文 参考訳(メタデータ) (2020-04-27T11:48:03Z) - Alleviating Semantic-level Shift: A Semi-supervised Domain Adaptation
Method for Semantic Segmentation [97.8552697905657]
このタスクの重要な課題は、ソースとターゲットドメイン間のデータ分散の相違を緩和する方法である。
本稿では,グローバルな視点とローカルな視点の両方から分布の整合性を促進できるASS(Alleviating Semantic-level Shift)を提案する。
GTA5、Cityscapes、Synthia、Cityscapesの2つのドメイン適応タスクにASSを適用します。
論文 参考訳(メタデータ) (2020-04-02T03:25:05Z) - Spatial Attention Pyramid Network for Unsupervised Domain Adaptation [66.75008386980869]
教師なし領域適応は様々なコンピュータビジョンタスクにおいて重要である。
教師なし領域適応のための新しい空間注意ピラミッドネットワークを設計する。
我々の手法は最先端の手法に対して大きなマージンで好適に機能する。
論文 参考訳(メタデータ) (2020-03-29T09:03:23Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。