論文の概要: Action Segmentation with Mixed Temporal Domain Adaptation
- arxiv url: http://arxiv.org/abs/2104.07461v1
- Date: Thu, 15 Apr 2021 13:48:14 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-16 15:19:09.043983
- Title: Action Segmentation with Mixed Temporal Domain Adaptation
- Title(参考訳): 混合時間領域適応によるアクションセグメンテーション
- Authors: Min-Hung Chen, Baopu Li, Yingze Bao, Ghassan AlRegib
- Abstract要約: 本論文では,この問題をドメイン適応問題として形成することにより,より容易に取得できる補助的無ラベル動画の活用を提案する。
本稿では,フレーム空間とビデオレベルの埋め込み特徴空間を協調的に整列する混合時間適応ドメイン(mtda)を提案する。
提案手法を3つの課題データセットで評価した。
- 参考スコア(独自算出の注目度): 39.432733797568254
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The main progress for action segmentation comes from densely-annotated data
for fully-supervised learning. Since manual annotation for frame-level actions
is time-consuming and challenging, we propose to exploit auxiliary unlabeled
videos, which are much easier to obtain, by shaping this problem as a domain
adaptation (DA) problem. Although various DA techniques have been proposed in
recent years, most of them have been developed only for the spatial direction.
Therefore, we propose Mixed Temporal Domain Adaptation (MTDA) to jointly align
frame- and video-level embedded feature spaces across domains, and further
integrate with the domain attention mechanism to focus on aligning the
frame-level features with higher domain discrepancy, leading to more effective
domain adaptation. Finally, we evaluate our proposed methods on three
challenging datasets (GTEA, 50Salads, and Breakfast), and validate that MTDA
outperforms the current state-of-the-art methods on all three datasets by large
margins (e.g. 6.4% gain on F1@50 and 6.8% gain on the edit score for GTEA).
- Abstract(参考訳): アクションセグメンテーションの主な進歩は、教師付き学習のための濃密な注釈付きデータである。
フレームレベルのアクションに対する手動アノテーションは時間を要するため、ドメイン適応(DA)問題としてこの問題を定式化することで、より容易に取得可能な、非ラベル付き動画の補助的利用を提案する。
近年,様々なDA手法が提案されているが,そのほとんどは空間方向のみに開発されている。
そこで本稿では,フレームレベルとビデオレベルの組込み特徴空間を協調的に整列する混合時間領域適応(mtda)を提案し,さらに,フレームレベルの特徴をより高いドメインの相違に合わせることに焦点を当てたドメインアテンション機構と統合することで,より効果的なドメイン適応を実現する。
最後に、提案手法を3つの挑戦的データセット(GTEA、50Salads、Breakfast)で評価し、MTDAが3つのデータセットの現在の最先端メソッドよりも大きなマージン(例えば、Breakfast)で優れていることを検証する。
F1@50で6.4%、GTEAで6.8%)。
関連論文リスト
- Unified Domain Adaptive Semantic Segmentation [96.74199626935294]
Unsupervised Adaptive Domain Semantic (UDA-SS)は、ラベル付きソースドメインからラベル付きターゲットドメインに監督を移すことを目的としている。
本稿では,特徴量と特徴量との相違に対処するQuad-directional Mixup(QuadMix)法を提案する。
提案手法は,4つの挑戦的UDA-SSベンチマークにおいて,最先端の成果を大きなマージンで上回っている。
論文 参考訳(メタデータ) (2023-11-22T09:18:49Z) - MEnsA: Mix-up Ensemble Average for Unsupervised Multi Target Domain
Adaptation on 3D Point Clouds [9.568577396815602]
Unlabelled Domain adaptation (UDA) は、教師なしターゲットドメインとラベル付きソースドメインの間の分散シフトの問題に対処する。
我々は,すべてのドメインの特徴表現を混合して,アンサンブル平均によるドメイン適応性能を向上させることを提案する。
混合表現では、ドメイン分類器を用いて、ソースドメインの特徴表現を、共有潜在空間における対象ドメインの特徴表現と区別する。
論文 参考訳(メタデータ) (2023-04-04T06:13:33Z) - A Comprehensive Survey on Source-free Domain Adaptation [69.17622123344327]
ソースフリードメイン適応(SFDA)の研究は近年注目を集めている。
SFDAの最近の進歩を包括的に調査し、それらを統一的な分類体系に整理する。
一般的な3つの分類基準で30以上のSFDA法を比較検討した。
論文 参考訳(メタデータ) (2023-02-23T06:32:09Z) - FIXED: Frustratingly Easy Domain Generalization with Mixup [53.782029033068675]
ドメイン一般化(Domain Generalization, DG)は、複数のトレーニングドメインから一般化可能なモデルを学ぶことを目的としている。
一般的な戦略は、Mixupcitezhang 2018mixupのようなメソッドによる一般化のためにトレーニングデータを拡張することである。
我々は、MixupベースのDG、すなわちドメイン不変の特徴mIXup(FIX)の簡易かつ効果的な拡張を提案する。
提案手法は,9つの最先端手法よりも優れており,試験精度の面では,ベースラインの平均6.5%を上回っている。
論文 参考訳(メタデータ) (2022-11-07T09:38:34Z) - Unsupervised Contrastive Domain Adaptation for Semantic Segmentation [75.37470873764855]
クロスドメイン適応における特徴アライメントのためのコントラスト学習を導入する。
提案手法は、ドメイン適応のための最先端手法を一貫して上回る。
Cityscapesデータセットで60.2% mIoUを達成した。
論文 参考訳(メタデータ) (2022-04-18T16:50:46Z) - Online Meta-Learning for Multi-Source and Semi-Supervised Domain
Adaptation [4.1799778475823315]
本稿では,既存のDAアルゴリズムの初期条件をメタラーニングすることで,性能向上のためのフレームワークを提案する。
マルチソース非教師付きドメイン適応(MSDA)と半教師付きドメイン適応(SSDA)の両方の変種を提示する。
最大規模のDomainNetを含む,いくつかのDAベンチマークで得られた成果を報告する。
論文 参考訳(メタデータ) (2020-04-09T07:48:22Z) - Action Segmentation with Joint Self-Supervised Temporal Domain
Adaptation [54.81021693364532]
我々は,アクションセグメンテーションのバリエーションの問題に対処するために,ラベルのないビデオを利用する。
本稿では,2つの自己監督型補助タスクを含む自己監督型時間領域適応(SSTDA)を提案する。
3つの挑戦的なデータセットにおいて、SSTDAは最先端の手法よりも大きなマージンで優れている。
論文 参考訳(メタデータ) (2020-03-05T18:52:33Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。