論文の概要: Augment Features Beyond Color for Domain Generalized Segmentation
- arxiv url: http://arxiv.org/abs/2307.01703v1
- Date: Tue, 4 Jul 2023 13:18:39 GMT
- ステータス: 処理完了
- システム内更新日: 2023-07-06 16:58:02.422677
- Title: Augment Features Beyond Color for Domain Generalized Segmentation
- Title(参考訳): ドメイン一般化セグメンテーションのための色を超えた拡張機能
- Authors: Qiyu Sun, Pavlo Melnyk, Michael Felsberg, Yang Tang
- Abstract要約: ドメイン一般化セマンティックセグメンテーション(DGSS)は必須だが非常に難しい課題である。
提案手法は,RICAとRFDAの2つのモジュールからなる。
我々は広範囲にわたる実験を行い、合成GTAVとSynTHIAから実際のCityscapes、BDDS、Mapillaryのデータセットへの一般化結果から、DGSSの最先端性能を実現することを示す。
- 参考スコア(独自算出の注目度): 22.760191032951226
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Domain generalized semantic segmentation (DGSS) is an essential but highly
challenging task, in which the model is trained only on source data and any
target data is not available. Previous DGSS methods can be partitioned into
augmentation-based and normalization-based ones. The former either introduces
extra biased data or only conducts channel-wise adjustments for data
augmentation, and the latter may discard beneficial visual information, both of
which lead to limited performance in DGSS. Contrarily, our method performs
inter-channel transformation and meanwhile evades domain-specific biases, thus
diversifying data and enhancing model generalization performance. Specifically,
our method consists of two modules: random image color augmentation (RICA) and
random feature distribution augmentation (RFDA). RICA converts images from RGB
to the CIELAB color model and randomizes color maps in a perception-based way
for image enhancement purposes. We further this augmentation by extending it
beyond color to feature space using a CycleGAN-based generative network, which
complements RICA and further boosts generalization capability. We conduct
extensive experiments, and the generalization results from the synthetic GTAV
and SYNTHIA to the real Cityscapes, BDDS, and Mapillary datasets show that our
method achieves state-of-the-art performance in DGSS.
- Abstract(参考訳): ドメイン一般化セマンティックセグメンテーション(dgss)は必須だが、非常に難しいタスクであり、モデルがソースデータのみに基づいてトレーニングされ、ターゲットデータも利用できない。
従来のDGSSメソッドは拡張ベースと正規化ベースに分割できる。
前者は余分なバイアス付きデータを導入するか、あるいはデータ拡張のためのチャネルワイズ調整のみを実行するか、後者は有益な視覚情報を捨て、どちらもDGSSの限られた性能に繋がる。
一方,本手法はチャネル間変換を行い,その一方でドメイン固有のバイアスを回避し,データの多様化とモデル一般化性能の向上を図る。
具体的には,ランダム画像色拡張 (rica) とランダム特徴分布拡張 (rfda) の2つのモジュールからなる。
RICAは、RGBからの画像をCIELABカラーモデルに変換し、知覚に基づく画像強調のための色マップをランダム化する。
我々はさらに、RICAを補完するCycleGANベースの生成ネットワークを用いて色を超えて特徴空間に拡張し、さらに一般化能力を高めることにより、この拡張を行う。
我々は広範な実験を行い,合成gtavとシンセサイアから実際の都市景観,bdd,mapillaryデータセットへの一般化結果から,dgssにおける最先端性能を実現することを示す。
関連論文リスト
- GIFD: A Generative Gradient Inversion Method with Feature Domain
Optimization [52.55628139825667]
Federated Learning(FL)は、クライアントのプライバシを保護するための有望な分散機械学習フレームワークとして登場した。
近年の研究では、事前学習された生成逆ネットワーク(GAN)を事前知識として活用することにより、攻撃者が共有勾配を逆転し、FLシステムに対する機密データを回復できることが示されている。
textbfGradient textbfInversion over textbfFeature textbfDomains (GIFD)を提案する。
論文 参考訳(メタデータ) (2023-08-09T04:34:21Z) - Frequency-mixed Single-source Domain Generalization for Medical Image
Segmentation [29.566769388674473]
医用画像セグメンテーションの欠如は、ディープラーニングモデルのための十分なトレーニングデータを集める上での課題となっている。
周波数混合単一ソース領域一般化法(FreeSDG)という新しい手法を提案する。
3つのモードの5つのデータセットに対する実験結果から,提案アルゴリズムの有効性が示された。
論文 参考訳(メタデータ) (2023-07-18T06:44:45Z) - Intra- & Extra-Source Exemplar-Based Style Synthesis for Improved Domain
Generalization [21.591831983223997]
セマンティックセグメンテーションにおけるドメインの一般化を改善するために,先進的なスタイル合成パイプラインを提案する。
提案手法は,StyleGAN2インバージョンのためのマスク付きノイズエンコーダに基づく。
データシフトの種類によって、ドライブシーンセマンティックセマンティックセグメンテーションの最大12.4%のmIoU改善を実現しています。
論文 参考訳(メタデータ) (2023-07-02T19:56:43Z) - Learning to Augment via Implicit Differentiation for Domain
Generalization [107.9666735637355]
ドメイン一般化(DG)は、複数のソースドメインを活用してドメイン一般化可能なモデルを学ぶことで、この問題を克服することを目的としている。
本稿では,AugLearnと呼ばれる新しい拡張型DG手法を提案する。
AugLearnは、PACS、Office-Home、Digits-DGの3つの標準DGベンチマークで効果を示す。
論文 参考訳(メタデータ) (2022-10-25T18:51:51Z) - Cluster-level pseudo-labelling for source-free cross-domain facial
expression recognition [94.56304526014875]
表情認識のためのSFUDA法を提案する。
本手法は,自己教師付き事前学習を利用して,対象データから優れた特徴表現を学習する。
提案手法の有効性を4つの適応方式で検証し,FERに適用した場合,既存のSFUDA法より一貫して優れていることを示す。
論文 参考訳(メタデータ) (2022-10-11T08:24:50Z) - AADG: Automatic Augmentation for Domain Generalization on Retinal Image
Segmentation [1.0452185327816181]
AADG(Automated Augmentation for Domain Generalization)と呼ばれるデータ操作に基づくドメイン一般化手法を提案する。
我々のAADGフレームワークは、新しいドメインを生成するデータ拡張ポリシーを効果的にサンプリングすることができる。
提案するAADGは,最先端の一般化性能を示し,既存手法より優れている。
論文 参考訳(メタデータ) (2022-07-27T02:26:01Z) - Federated and Generalized Person Re-identification through Domain and
Feature Hallucinating [88.77196261300699]
人物再識別(re-ID)におけるフェデレーションドメイン一般化(FedDG)の問題について検討する。
一般化された局所的・グローバルなモデルを学ぶための多様な特徴を創出する手法として,DFH (Domain and Feature Hallucinating) を提案する。
提案手法は4つの大規模re-IDベンチマークにおいてFedDGの最先端性能を実現する。
論文 参考訳(メタデータ) (2022-03-05T09:15:13Z) - Boosting Few-shot Semantic Segmentation with Transformers [81.43459055197435]
TRansformer-based Few-shot Semantic segmentation Method (TRFS)
我々のモデルは,グローバル・エンハンスメント・モジュール(GEM)とローカル・エンハンスメント・モジュール(LEM)の2つのモジュールから構成される。
論文 参考訳(メタデータ) (2021-08-04T20:09:21Z) - Domain Adaptation for Learning Generator from Paired Few-Shot Data [72.04430033118426]
十分なソースデータと少数のターゲットデータを持つジェネレータを学習するためのペアドフェーショットGAN(PFS-GAN)モデルを提案する。
提案手法は,複数のベースラインと比較して,より多様性の高い生成対象ドメインデータに対して,定量的,定性的な結果が得られる。
論文 参考訳(メタデータ) (2021-02-25T10:11:44Z) - Multi-Spectral Image Synthesis for Crop/Weed Segmentation in Precision
Farming [3.4788711710826083]
本稿では, 精密農業における作物・雑草の分枝化問題に適用し, 共通データ増分法に関する代替手法を提案する。
我々は、最も関連性の高いオブジェクトクラス(作物や雑草)を合成されたクラスに置き換えることで、半人工的なサンプルを作成する。
RGBデータに加えて、近赤外(NIR)情報も考慮し、4つのチャネルマルチスペクトル合成画像を生成する。
論文 参考訳(メタデータ) (2020-09-12T08:49:36Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。