論文の概要: Foreground-Aware Stylization and Consensus Pseudo-Labeling for Domain
Adaptation of First-Person Hand Segmentation
- arxiv url: http://arxiv.org/abs/2107.02718v1
- Date: Tue, 6 Jul 2021 16:39:06 GMT
- ステータス: 処理完了
- システム内更新日: 2021-07-07 17:35:20.893166
- Title: Foreground-Aware Stylization and Consensus Pseudo-Labeling for Domain
Adaptation of First-Person Hand Segmentation
- Title(参考訳): 前景認識型スタイライゼーションとコンセンサス擬似ラベルによる人手セグメンテーションのドメイン適応
- Authors: Takehiko Ohkawa, Takuma Yagi, Atsushi Hashimoto, Yoshitaka Ushiku,
Yoichi Sato
- Abstract要約: 我々は手分割の領域適応のための前景認識画像のスタイリングとコンセンサス擬似ラベルを提案する。
実画像とシミュレーション画像から手分割の領域適応を検証した。
- 参考スコア(独自算出の注目度): 45.40256866042757
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Hand segmentation is a crucial task in first-person vision. Since
first-person images exhibit strong bias in appearance among different
environments, adapting a pre-trained segmentation model to a new domain is
required in hand segmentation. Here, we focus on appearance gaps for hand
regions and backgrounds separately. We propose (i) foreground-aware image
stylization and (ii) consensus pseudo-labeling for domain adaptation of hand
segmentation. We stylize source images independently for the foreground and
background using target images as style. To resolve the domain shift that the
stylization has not addressed, we apply careful pseudo-labeling by taking a
consensus between the models trained on the source and stylized source images.
We validated our method on domain adaptation of hand segmentation from real and
simulation images. Our method achieved state-of-the-art performance in both
settings. We also demonstrated promising results in challenging multi-target
domain adaptation and domain generalization settings. Code is available at
https://github.com/ut-vision/FgSty-CPL.
- Abstract(参考訳): ハンドセグメンテーションは、一人称視覚において重要なタスクである。
1人称画像は、異なる環境の外観に強い偏見を示すため、手話分割において、トレーニング済みのセグメンテーションモデルを新しい領域に適応させる必要がある。
ここでは,手領域と背景の外観ギャップを別々に検討する。
i)手分割の領域適応のための前景認識画像スタイリングと (ii) コンセンサス擬似ラベルを提案する。
我々は、ターゲットイメージをスタイルとして、前景と背景のソースイメージを独立にスタイリングする。
スタイル化が未解決の領域シフトを解決するために,ソース上でトレーニングされたモデルとスタイル化されたソースイメージとのコンセンサスを考慮し,注意深い擬似ラベルを適用する。
実画像およびシミュレーション画像からのハンドセグメンテーションの領域適応について検証した。
本手法は両設定で最先端の性能を達成した。
また、マルチターゲットドメイン適応とドメイン一般化設定に挑戦する有望な結果を示した。
コードはhttps://github.com/ut-vision/FgSty-CPLで入手できる。
関連論文リスト
- Generating Reliable Pixel-Level Labels for Source Free Domain Adaptation [13.913151437401472]
ReGENは、画像間翻訳ネットワークとセグメンテーションネットワークとを備える。
我々のワークフローは、元のターゲット領域画像からノイズ予測を用いてターゲットライクな画像を生成する。
論文 参考訳(メタデータ) (2023-07-03T09:44:13Z) - One-shot Unsupervised Domain Adaptation with Personalized Diffusion
Models [15.590759602379517]
ラベル付きソースドメインからターゲットドメインへのセグメンテーションモデルの適用は、ドメイン適応において最も難しい問題の1つである。
テキストと画像の拡散モデルを用いて、写真リアル画像を用いた合成ターゲットデータセットを生成する。
実験の結果,本手法は最先端OSUDA法を最大7.1%超えることがわかった。
論文 参考訳(メタデータ) (2023-03-31T14:16:38Z) - I2F: A Unified Image-to-Feature Approach for Domain Adaptive Semantic
Segmentation [55.633859439375044]
意味的セグメンテーションのための教師なしドメイン適応(UDA)は、重いアノテーション作業から人々を解放する有望なタスクである。
この問題に対処する主要なアイデアは、画像レベルと特徴レベルの両方を共同で実行することである。
本稿では,画像レベルと特徴レベルを統一したセマンティックセグメンテーションのための新しいUDAパイプラインを提案する。
論文 参考訳(メタデータ) (2023-01-03T15:19:48Z) - Domain-invariant Prototypes for Semantic Segmentation [30.932130453313537]
ドメイン適応型セマンティックセグメンテーションのためのドメイン不変のプロトタイプを学習する。
本手法は,1段階の訓練のみを伴い,大規模な未注釈対象画像に対してトレーニングを行う必要はない。
論文 参考訳(メタデータ) (2022-08-12T02:21:05Z) - Target and Task specific Source-Free Domain Adaptive Image Segmentation [73.78898054277538]
ソースフリー領域適応画像分割のための2段階のアプローチを提案する。
我々は,高エントロピー領域を抑えつつ,ターゲット固有の擬似ラベルを生成することに注力する。
第2段階では、タスク固有の表現にネットワークを適用することに重点を置いている。
論文 参考訳(メタデータ) (2022-03-29T17:50:22Z) - Style Mixing and Patchwise Prototypical Matching for One-Shot
Unsupervised Domain Adaptive Semantic Segmentation [21.01132797297286]
ワンショットの教師なしドメイン適応では、セグメンタはトレーニング中にラベルなしのターゲットイメージを1つしか見ることができない。
このような計算負担を効果的に軽減できるOSUDA法を提案する。
提案手法は,ドメイン適応型セマンティックセグメンテーションのための2つの一般的なベンチマーク上で,最先端性能を実現する。
論文 参考訳(メタデータ) (2021-12-09T02:47:46Z) - DSP: Dual Soft-Paste for Unsupervised Domain Adaptive Semantic
Segmentation [97.74059510314554]
セグメンテーションのための教師なしドメイン適応(UDA)は、ラベル付きソースドメインで訓練されたセグメンテーションモデルをラベル付きターゲットドメインに適応させることを目的としている。
既存の手法では、大きなドメインギャップに悩まされながら、ドメイン不変の特徴を学習しようとする。
本稿では,新しいDual Soft-Paste (DSP)法を提案する。
論文 参考訳(メタデータ) (2021-07-20T16:22:40Z) - Pixel-Level Cycle Association: A New Perspective for Domain Adaptive
Semantic Segmentation [169.82760468633236]
本稿では,ソースとターゲットの画素ペア間の画素レベルサイクルの関連性を構築することを提案する。
我々の手法は1段階のエンドツーエンドで訓練でき、追加のパラメータは導入しない。
論文 参考訳(メタデータ) (2020-10-31T00:11:36Z) - TriGAN: Image-to-Image Translation for Multi-Source Domain Adaptation [82.52514546441247]
本稿では,ジェネレーティブ・アドバイサル・ネットワークに基づくマルチソース・ドメイン適応(MSDA)の最初のアプローチを提案する。
本手法は,画像の出現がドメイン,スタイル,内容の3つの要因に依存するという観察に着想を得たものである。
提案手法はMSDAベンチマークを用いて試行し,最先端の手法より優れていることを示す。
論文 参考訳(メタデータ) (2020-04-19T05:07:22Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。