論文の概要: FeatFSDA: Towards Few-shot Domain Adaptation for Video-based Activity
Recognition
- arxiv url: http://arxiv.org/abs/2305.08420v1
- Date: Mon, 15 May 2023 08:01:05 GMT
- ステータス: 処理完了
- システム内更新日: 2023-05-16 15:42:44.994235
- Title: FeatFSDA: Towards Few-shot Domain Adaptation for Video-based Activity
Recognition
- Title(参考訳): FeatFSDA:ビデオによる活動認識のための領域適応に向けて
- Authors: Kunyu Peng, Di Wen, David Schneider, Jiaming Zhang, Kailun Yang, M.
Saquib Sarfraz, Rainer Stiefelhagen, Alina Roitberg
- Abstract要約: ビデオベース行動認識(FSDA-AR)の領域適応について検討する。
この設定はアプリケーションにとって魅力的で有望なものであり、ターゲットドメイン内のクラスごとのレコードとラベルを必要とする。
その結果,FSDA-ARと非教師なし領域適応の対応性は極めて低い(ラベル付き)対象例が得られた。
- 参考スコア(独自算出の注目度): 29.914829800938946
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Domain adaptation is essential for activity recognition, as common
spatiotemporal architectures risk overfitting due to increased parameters
arising from the temporal dimension.
Unsupervised domain adaptation methods have been extensively studied, yet,
they require large-scale unlabeled data from the target domain. In this work,
we address few-shot domain adaptation for video-based activity recognition
(FSDA-AR), which leverages a very small amount of labeled target videos to
achieve effective adaptation. This setting is attractive and promising for
applications, as it requires recording and labeling only a few, or even a
single example per class in the target domain, which often includes activities
that are rare yet crucial to recognize. We construct FSDA-AR benchmarks using
five established datasets: UCF101, HMDB51, EPIC-KITCHEN, Sims4Action, and
Toyota Smart Home. Our results demonstrate that FSDA-AR performs comparably to
unsupervised domain adaptation with significantly fewer (yet labeled) target
examples. We further propose a novel approach, FeatFSDA, to better leverage the
few labeled target domain samples as knowledge guidance. FeatFSDA incorporates
a latent space semantic adjacency loss, a domain prototypical similarity loss,
and a graph-attentive-network-based edge dropout technique. Our approach
achieves state-of-the-art performance on all datasets within our FSDA-AR
benchmark. To encourage future research of few-shot domain adaptation for
video-based activity recognition, we will release our benchmarks and code at
https://github.com/KPeng9510/FeatFSDA.
- Abstract(参考訳): 領域適応は活動認識に不可欠であり、時空間的アーキテクチャは時間的次元から生じるパラメータの増加によって過度に適合するリスクがある。
教師なしドメイン適応法は広範囲に研究されてきたが、ターゲットドメインからの大規模なラベルなしデータが必要である。
本研究では,映像ベースアクティビティ認識(fsda-ar)のための,ごく少量のラベル付きターゲットビデオを用いて効果的な適応を実現する,少数ショットの領域適応について述べる。
この設定はアプリケーションにとって魅力的で有望なもので、少数の記録とラベル付けが必要であり、ターゲットドメイン内のクラス1つにつき1つの例さえ必要である。
UCF101, HMDB51, EPIC-KITCHEN, Sims4Action, Toyota Smart Homeの5つのデータセットを用いてFSDA-ARベンチマークを構築した。
この結果から,FSDA-ARは非教師なし領域適応に比較可能であり,対象対象の(ラベル付きの場合)は極めて少ないことがわかった。
さらに,数少ないラベル付き対象ドメインサンプルを知識ガイダンスとして活用するための新しいアプローチFeatFSDAを提案する。
featfsdaは、潜在空間意味的隣接損失、ドメインの原型的類似性損失、グラフ接続ネットワークベースのエッジドロップアウトテクニックを組み込んでいる。
提案手法は,FSDA-ARベンチマークのすべてのデータセットに対して,最先端のパフォーマンスを実現する。
ビデオベースのアクティビティ認識のためのいくつかのドメイン適応の今後の研究を促進するため、ベンチマークとコードをhttps://github.com/KPeng9510/FeatFSDAで公開します。
関連論文リスト
- Revisiting the Domain Shift and Sample Uncertainty in Multi-source
Active Domain Transfer [69.82229895838577]
Active Domain Adaptation (ADA)は、アノテートするターゲットデータの限られた数を選択することで、新しいターゲットドメインにおけるモデル適応を最大限に向上することを目的としている。
この設定は、複数のソースからトレーニングデータを収集するより実践的なシナリオを無視します。
これは、ADAを単一のソースドメインから複数のソースドメインに拡張する、新しい、挑戦的な知識転送の設定を目標にしています。
論文 参考訳(メタデータ) (2023-11-21T13:12:21Z) - ADeADA: Adaptive Density-aware Active Domain Adaptation for Semantic
Segmentation [23.813813896293876]
セマンティックセグメンテーションのための一般的なアクティブドメイン適応フレームワークであるADeADAについて述べる。
対象とするドメインアノテーションが5%未満の場合、我々のメソッドは完全な監視の方法と同等の結果に到達します。
論文 参考訳(メタデータ) (2022-02-14T05:17:38Z) - Instance Level Affinity-Based Transfer for Unsupervised Domain
Adaptation [74.71931918541748]
ILA-DAと呼ばれる適応中のソースからターゲットへの転送に対するインスタンス親和性に基づく基準を提案する。
まず、ソースとターゲットをまたいだ類似および異種サンプルを抽出し、マルチサンプルのコントラスト損失を利用してドメインアライメントプロセスを駆動する信頼性が高く効率的な手法を提案する。
ILA-DAの有効性は、様々なベンチマークデータセットに対する一般的なドメイン適応手法よりも精度が一貫した改善を観察することによって検証する。
論文 参考訳(メタデータ) (2021-04-03T01:33:14Z) - Discriminative Cross-Domain Feature Learning for Partial Domain
Adaptation [70.45936509510528]
部分的なドメイン適応は、より大きく多様なソースドメインからの知識を、より少ないクラス数でより小さなターゲットドメインに適応させることを目的としています。
ドメイン適応の最近の実践は、ターゲットドメインの擬似ラベルを組み込むことで、効果的な特徴を抽出する。
ターゲットデータを少数のソースデータのみにアライメントすることが不可欠である。
論文 参考訳(メタデータ) (2020-08-26T03:18:53Z) - Mind the Gap: Enlarging the Domain Gap in Open Set Domain Adaptation [65.38975706997088]
オープンセットドメイン適応(OSDA)は、ターゲットドメインに未知のクラスが存在することを前提としている。
既存の最先端手法は、より大きなドメインギャップが存在する場合、かなりの性能低下を被ることを示す。
我々は、より大きなドメインギャップに特に対処するための新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2020-03-08T14:20:24Z) - Towards Fair Cross-Domain Adaptation via Generative Learning [50.76694500782927]
ドメイン適応(DA)は、よくラベル付けされたソースドメイン上でトレーニングされたモデルを、異なる分散に横たわる未ラベルのターゲットドメインに適応することを目的としています。
本研究では,新規な生成的Few-shot Cross-Domain Adaptation (GFCA) アルゴリズムを開発した。
論文 参考訳(メタデータ) (2020-03-04T23:25:09Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。