論文の概要: Texture Learning Domain Randomization for Domain Generalized
Segmentation
- arxiv url: http://arxiv.org/abs/2303.11546v2
- Date: Thu, 17 Aug 2023 10:39:37 GMT
- ステータス: 処理完了
- システム内更新日: 2023-08-22 00:39:34.598329
- Title: Texture Learning Domain Randomization for Domain Generalized
Segmentation
- Title(参考訳): ドメイン一般化セグメンテーションのためのテクスチャ学習ドメインランダム化
- Authors: Sunghwan Kim, Dae-hwan Kim, Hoseong Kim
- Abstract要約: 既存の汎用セマンティックドメイン(DGSS)法は,テクスチャよりも形状を優先するモデルを導くことによって,領域ギャップ問題を緩和している。
本稿では,DGSSの性能向上にテクスチャを活用することが重要であることを論じる。
学習領域ランダム化(TLDR)という新しいフレームワークを提案する。
- 参考スコア(独自算出の注目度): 5.09071261950194
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Deep Neural Networks (DNNs)-based semantic segmentation models trained on a
source domain often struggle to generalize to unseen target domains, i.e., a
domain gap problem. Texture often contributes to the domain gap, making DNNs
vulnerable to domain shift because they are prone to be texture-biased.
Existing Domain Generalized Semantic Segmentation (DGSS) methods have
alleviated the domain gap problem by guiding models to prioritize shape over
texture. On the other hand, shape and texture are two prominent and
complementary cues in semantic segmentation. This paper argues that leveraging
texture is crucial for improving performance in DGSS. Specifically, we propose
a novel framework, coined Texture Learning Domain Randomization (TLDR). TLDR
includes two novel losses to effectively enhance texture learning in DGSS: (1)
a texture regularization loss to prevent overfitting to source domain textures
by using texture features from an ImageNet pre-trained model and (2) a texture
generalization loss that utilizes random style images to learn diverse texture
representations in a self-supervised manner. Extensive experimental results
demonstrate the superiority of the proposed TLDR; e.g., TLDR achieves 46.5 mIoU
on GTA-to-Cityscapes using ResNet-50, which improves the prior state-of-the-art
method by 1.9 mIoU. The source code is available at
https://github.com/ssssshwan/TLDR.
- Abstract(参考訳): ソースドメインでトレーニングされたディープニューラルネットワーク(dnn)ベースのセマンティックセグメンテーションモデルは、ターゲットドメイン、すなわちドメインギャップ問題への一般化に苦労することが多い。
テクスチャは、しばしばドメインギャップに寄与し、DNNはテクスチャバイアスのやすいため、ドメインシフトに対して脆弱になる。
既存のドメイン一般化セマンティクスセグメンテーション(dgss)メソッドは、テクスチャよりも形状を優先するモデルを導くことによって、ドメインギャップの問題を軽減する。
一方,形状とテクスチャは,意味セグメンテーションにおける2つの特徴的かつ相補的な手がかりである。
本稿では,DGSSの性能向上にテクスチャを活用することが重要であることを論じる。
具体的には,テクスチャ学習ドメインランダム化(TLDR)という新しいフレームワークを提案する。
TLDRは,DGSSにおけるテクスチャ学習を効果的に強化する2つの新たな損失を含む。(1)ImageNet事前学習モデルからのテクスチャ特徴を用いて,ソースドメインテクスチャへの過度な適合を防止するテクスチャ正規化損失,(2)ランダムなスタイル画像を用いて,多様なテクスチャ表現を自己指導的に学習するテクスチャ一般化損失。
tldr は resnet-50 を用いて gta-to-cityscape において 46.5 miou を達成し、1.9 miou で以前の最先端手法を改善した。
ソースコードはhttps://github.com/sssshwan/TLDRで入手できる。
関連論文リスト
- Adaptive Texture Filtering for Single-Domain Generalized Segmentation [25.731422118708487]
ドメインの一般化は、ドメイン不変の機能を学ぶことによって、目に見えないドメインのパフォーマンス劣化を軽減することを目的としている。
そこで本稿では, 拡張を使わずにテクスチャの影響を抑えるための新しい適応型テクスチャフィルタリング機構を提案する。
論文 参考訳(メタデータ) (2023-03-06T07:30:53Z) - Self-Training Guided Disentangled Adaptation for Cross-Domain Remote
Sensing Image Semantic Segmentation [20.07907723950031]
本稿では,クロスドメインRS画像セマンティックセグメンテーションタスクのための自己学習ガイド型不整合適応ネットワーク(ST-DASegNet)を提案する。
まず,ソースとターゲットの両方のイメージに対して,ソーススタイルとターゲットスタイルの特徴をそれぞれ抽出するために,ソース学生のバックボーンとターゲット学生のバックボーンを提案する。
次に、ユニバーサルな特徴を抽出し、ソーススタイルとターゲットスタイルの特徴の異なる特徴を浄化するために、ドメイン非絡み合いモジュールを提案する。
論文 参考訳(メタデータ) (2023-01-13T13:11:22Z) - I2F: A Unified Image-to-Feature Approach for Domain Adaptive Semantic
Segmentation [55.633859439375044]
意味的セグメンテーションのための教師なしドメイン適応(UDA)は、重いアノテーション作業から人々を解放する有望なタスクである。
この問題に対処する主要なアイデアは、画像レベルと特徴レベルの両方を共同で実行することである。
本稿では,画像レベルと特徴レベルを統一したセマンティックセグメンテーションのための新しいUDAパイプラインを提案する。
論文 参考訳(メタデータ) (2023-01-03T15:19:48Z) - Geometry-Aware Network for Domain Adaptive Semantic Segmentation [64.00345743710653]
本稿では,ドメイン間のギャップを小さくするために,ドメイン適応のための幾何学的ネットワーク(GANDA)を提案する。
我々は、RGB-D画像から生成された点雲上の3Dトポロジを利用して、対象領域における座標色歪みと擬似ラベルの微細化を行う。
我々のモデルは,GTA5->CityscapesとSynTHIA->Cityscapesの最先端技術より優れている。
論文 参考訳(メタデータ) (2022-12-02T00:48:44Z) - Stagewise Unsupervised Domain Adaptation with Adversarial Self-Training
for Road Segmentation of Remote Sensing Images [93.50240389540252]
リモートセンシング画像からの道路セグメンテーションは、幅広い応用可能性を持つ課題である。
本稿では,この領域における領域シフト(DS)問題に対処するため,RoadDAと呼ばれる新たな段階的ドメイン適応モデルを提案する。
2つのベンチマーク実験の結果、RoadDAはドメインギャップを効率的に減らし、最先端の手法より優れていることが示された。
論文 参考訳(メタデータ) (2021-08-28T09:29:14Z) - Domain Adaptation for Real-World Single View 3D Reconstruction [1.611271868398988]
教師なしのドメイン適応は、ラベル付き合成ソースドメインからラベルなしの実際のターゲットドメインに知識を転送するために使用することができる。
本稿では,3次元モデルでは対象のドメインデータが教師されないが,クラスラベルでは教師されないという事実を生かして,新しいアーキテクチャを提案する。
その結果はShapeNetをソースドメインとして、Object Domain Suite(ODDS)データセット内のドメインをターゲットとして実行されます。
論文 参考訳(メタデータ) (2021-08-24T22:02:27Z) - Global and Local Texture Randomization for Synthetic-to-Real Semantic
Segmentation [40.556020857447535]
GTR(Global Randomization)とLTR(Local Texture Randomization)という2つの単純なテクスチャランダム化機構を提案する。
GTRは、ソース画像のテクスチャを多様なテクスチャスタイルにランダム化する。
LTRは、ソースイメージを部分的にスタイリングするために、多様なローカル領域を生成する。
論文 参考訳(メタデータ) (2021-08-05T05:14:49Z) - DSP: Dual Soft-Paste for Unsupervised Domain Adaptive Semantic
Segmentation [97.74059510314554]
セグメンテーションのための教師なしドメイン適応(UDA)は、ラベル付きソースドメインで訓練されたセグメンテーションモデルをラベル付きターゲットドメインに適応させることを目的としている。
既存の手法では、大きなドメインギャップに悩まされながら、ドメイン不変の特徴を学習しようとする。
本稿では,新しいDual Soft-Paste (DSP)法を提案する。
論文 参考訳(メタデータ) (2021-07-20T16:22:40Z) - Supervised Domain Adaptation using Graph Embedding [86.3361797111839]
領域適応法は、2つの領域間の分布がシフトし、それを認識しようとすると仮定する。
グラフ埋め込みに基づく汎用フレームワークを提案する。
提案手法が強力なドメイン適応フレームワークにつながることを示す。
論文 参考訳(メタデータ) (2020-03-09T12:25:13Z) - Image Fine-grained Inpainting [89.17316318927621]
拡張畳み込みの密結合を利用してより大きく効果的な受容場を得る一段階モデルを提案する。
この効率的なジェネレータをよく訓練するために、頻繁に使用されるVGG特徴整合損失を除いて、新しい自己誘導回帰損失を設計する。
また、局所的・グローバルな分枝を持つ識別器を用いて、局所的・グローバルな内容の整合性を確保する。
論文 参考訳(メタデータ) (2020-02-07T03:45:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。