論文の概要: POND: Multi-Source Time Series Domain Adaptation with Information-Aware
Prompt Tuning
- arxiv url: http://arxiv.org/abs/2312.12276v2
- Date: Wed, 14 Feb 2024 02:24:04 GMT
- ステータス: 処理完了
- システム内更新日: 2024-02-15 18:56:57.403504
- Title: POND: Multi-Source Time Series Domain Adaptation with Information-Aware
Prompt Tuning
- Title(参考訳): POND:情報認識型プロンプトチューニングによるマルチソース時系列ドメイン適応
- Authors: Junxiang Wang, Guangji Bai, Wei Cheng, Zhengzhang Chen, Liang Zhao,
and Haifeng Chen
- Abstract要約: 時系列ドメイン適応は、多様なアプリケーションにおいて、重要かつ複雑な課題である。
POND(PrOmpt-based domaiN Discrimination)は,時系列ドメイン適応にプロンプトを利用する最初のフレームワークである。
提案するPONDモデルは,F1スコア上での最先端比較手法を最大66%向上させる。
- 参考スコア(独自算出の注目度): 40.197245493051526
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Time series domain adaptation stands as a pivotal and intricate challenge
with diverse applications, including but not limited to human activity
recognition, sleep stage classification, and machine fault diagnosis. Despite
the numerous domain adaptation techniques proposed to tackle this complex
problem, they primarily focus on domain adaptation from a single source domain.
Yet, it is more crucial to investigate domain adaptation from multiple domains
due to the potential for greater improvements. To address this, three important
challenges need to be overcome: 1). The lack of exploration to utilize
domain-specific information for domain adaptation, 2). The difficulty to learn
domain-specific information that changes over time, and 3). The difficulty to
evaluate learned domain-specific information. In order to tackle these
challenges simultaneously, in this paper, we introduce PrOmpt-based domaiN
Discrimination (POND), the first framework to utilize prompts for time series
domain adaptation. Specifically, to address Challenge 1, we extend the idea of
prompt tuning to time series analysis and learn prompts to capture common and
domain-specific information from all source domains. To handle Challenge 2, we
introduce a conditional module for each source domain to generate prompts from
time series input data. For Challenge 3, we propose two criteria to select good
prompts, which are used to choose the most suitable source domain for domain
adaptation. The efficacy and robustness of our proposed POND model are
extensively validated through experiments across 50 scenarios encompassing four
datasets. Experimental results demonstrate that our proposed POND model
outperforms all state-of-the-art comparison methods by up to $66\%$ on the
F1-score.
- Abstract(参考訳): 時系列領域適応(time series domain adaptation)は、人間の活動認識、睡眠ステージ分類、機械障害診断など、さまざまな応用において重要かつ複雑な課題である。
複雑な問題に対処するために提案された多くのドメイン適応技術にもかかわらず、それらは主に単一のソースドメインからのドメイン適応にフォーカスしています。
しかし、改善の可能性があるため、複数のドメインからのドメイン適応を調べることがより重要である。
これに対処するには、3つの重要な課題を克服する必要がある。
ドメイン固有の情報をドメイン適応に利用するための探索の欠如, 2)
時間とともに変化するドメイン固有の情報を学ぶのが困難である。
学習したドメイン固有情報を評価するのが困難である。
本稿では,これらの課題を同時に解決するために,時系列領域適応のためのプロンプトを利用する最初のフレームワークであるpond(promply-based domain discrimination)を提案する。
特に、チャレンジ1に取り組むために、プロンプトチューニングを時系列分析に拡張し、すべてのソースドメインから共通およびドメイン固有の情報をキャプチャするプロンプトを学習する。
チャレンジ2に対処するため,各ソース領域に条件付きモジュールを導入し,時系列入力データからプロンプトを生成する。
チャレンジ3では、適切なプロンプトを選択するための2つの基準を提案し、ドメイン適応に最適なソースドメインを選択するのに使用される。
提案したPONDモデルの有効性とロバスト性は、4つのデータセットを含む50のシナリオにまたがる実験により広く検証される。
実験結果から,提案モデルがf1-scoreにおいて,最先端の比較手法を最大66%上回ることがわかった。
関連論文リスト
- Role Prompting Guided Domain Adaptation with General Capability Preserve
for Large Language Models [55.51408151807268]
特定のドメインに合わせると、LLM(Large Language Models)は破滅的な忘れを経験する傾向がある。
同時に複数のドメインのための汎用モデルを構築することで、全体的なパフォーマンスが低下することが多い。
RolE Prompting Guided Multi-Domain Adaptation (REGA) 戦略を提案する。
論文 参考訳(メタデータ) (2024-03-05T08:22:41Z) - DPOD: Domain-Specific Prompt Tuning for Multimodal Fake News Detection [15.599951180606947]
文脈外画像を用いたフェイクニュースが広まり、情報過負荷の時代における問題となっている。
ドメイン外データが、所望のドメインのコンテキスト外誤情報検出を改善するのに役立つかどうかを検討する。
DPOD (Domain-specific Prompt-tuning using Out-of-Domain data) と呼ばれる新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2023-11-27T08:49:26Z) - UniTime: A Language-Empowered Unified Model for Cross-Domain Time Series
Forecasting [59.11817101030137]
この研究はドメイン境界を超越する統一モデルパラダイムを提唱する。
効果的なクロスドメインモデルを学ぶことは、以下の課題を提示します。
効果的なドメイン間時系列学習のためのUniTimeを提案する。
論文 参考訳(メタデータ) (2023-10-15T06:30:22Z) - Context-aware Domain Adaptation for Time Series Anomaly Detection [69.3488037353497]
時系列異常検出は、幅広い現実世界の応用において難しい課題である。
近年,類似分野の知識を活用するため,時系列領域適応への取り組みが進められている。
本研究では,コンテキストサンプリングと異常検出を併用した共同学習手法を提案する。
論文 参考訳(メタデータ) (2023-04-15T02:28:58Z) - TAL: Two-stream Adaptive Learning for Generalizable Person
Re-identification [115.31432027711202]
我々は、ドメイン固有性とドメイン不変性の両方が、re-idモデルの一般化能力の向上に不可欠であると主張する。
これら2種類の情報を同時にモデル化するために,2ストリーム適応学習 (TAL) を命名した。
我々のフレームワークは、単一ソースとマルチソースの両方のドメイン一般化タスクに適用できる。
論文 参考訳(メタデータ) (2021-11-29T01:27:42Z) - Multi-Domain Spoken Language Understanding Using Domain- and Task-Aware
Parameterization [78.93669377251396]
音声言語理解は、各ドメインでトレーニングデータのセットが利用できる教師付き学習問題として対処されてきた。
既存の1つのアプローチは、ドメイン間の共同トレーニングに共有パラメータを使用して、マルチドメイン学習を行うことによって、この問題を解決する。
本稿では,ドメイン固有モデルパラメータとタスク固有モデルパラメータを用いて,この手法のパラメータ化を改善することを提案する。
論文 参考訳(メタデータ) (2020-04-30T15:15:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。