論文の概要: Towards Out-of-Distribution Sequential Event Prediction: A Causal
Treatment
- arxiv url: http://arxiv.org/abs/2210.13005v1
- Date: Mon, 24 Oct 2022 07:54:13 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-25 21:45:00.380455
- Title: Towards Out-of-Distribution Sequential Event Prediction: A Causal
Treatment
- Title(参考訳): アウト・オブ・ディストリビューション・シークエンシャル・イベント予測に向けて:因果的治療
- Authors: Chenxiao Yang, Qitian Wu, Qingsong Wen, Zhiqiang Zhou, Liang Sun,
Junchi Yan
- Abstract要約: シーケンシャルなイベント予測の目標は、一連の歴史的なイベントに基づいて次のイベントを見積もることである。
実際には、次のイベント予測モデルは、一度に収集されたシーケンシャルなデータで訓練される。
文脈固有の表現を学習するための階層的な分岐構造を持つフレームワークを提案する。
- 参考スコア(独自算出の注目度): 72.50906475214457
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The goal of sequential event prediction is to estimate the next event based
on a sequence of historical events, with applications to sequential
recommendation, user behavior analysis and clinical treatment. In practice, the
next-event prediction models are trained with sequential data collected at one
time and need to generalize to newly arrived sequences in remote future, which
requires models to handle temporal distribution shift from training to testing.
In this paper, we first take a data-generating perspective to reveal a negative
result that existing approaches with maximum likelihood estimation would fail
for distribution shift due to the latent context confounder, i.e., the common
cause for the historical events and the next event. Then we devise a new
learning objective based on backdoor adjustment and further harness variational
inference to make it tractable for sequence learning problems. On top of that,
we propose a framework with hierarchical branching structures for learning
context-specific representations. Comprehensive experiments on diverse tasks
(e.g., sequential recommendation) demonstrate the effectiveness, applicability
and scalability of our method with various off-the-shelf models as backbones.
- Abstract(参考訳): 逐次イベント予測の目標は, 逐次的レコメンデーション, ユーザ行動分析, 臨床治療への応用を含む, 過去の事象の系列に基づいて次の事象を推定することである。
実際には、次のイベント予測モデルは、一度に収集されたシーケンシャルなデータでトレーニングされ、トレーニングからテストへの時間的分散シフトを処理するモデルを必要とする、リモートで新たに到着したシーケンスに一般化する必要がある。
本稿では,まずデータ生成の観点から,過去事象と次の事象の共通原因である潜在コンテクストの共同設立者による分散シフトにおいて,最大確率推定による既存アプローチが失敗するという負の結果を明らかにする。
そして,バックドア調整に基づく新しい学習目標を考案し,さらに変分推論を活用し,シーケンス学習問題に適用可能とした。
さらに,コンテキスト固有の表現を学習するための階層的分岐構造を持つフレームワークを提案する。
多様なタスク(例えばシーケンシャルレコメンデーション)に関する総合的な実験は、様々なオフザシェルフモデルをバックボーンとして、我々の手法の有効性、適用性、拡張性を実証する。
関連論文リスト
- Pretext Training Algorithms for Event Sequence Data [29.70078362944441]
本稿では,イベントシーケンスデータに適した自己教師付き事前テキスト学習フレームワークを提案する。
私たちのプレテキストタスクは、さまざまなダウンストリームタスクで一般化可能な基礎表現をアンロックします。
論文 参考訳(メタデータ) (2024-02-16T01:25:21Z) - A Supervised Contrastive Learning Pretrain-Finetune Approach for Time
Series [15.218841180577135]
本稿では,教師付きコントラスト学習を利用して,事前学習データセット内の特徴を識別する新しい事前学習手法を提案する。
次に、事前学習データセットの学習力学とより密に連携することで、目標データの正確な予測を強化するための微調整手順を提案する。
論文 参考訳(メタデータ) (2023-11-21T02:06:52Z) - Non-Autoregressive Diffusion-based Temporal Point Processes for
Continuous-Time Long-Term Event Prediction [8.88485011274486]
本研究では,長期イベント予測のための拡散に基づく非自己回帰時間プロセスモデルを提案する。
事象列上で拡散過程を実行するために,対象事象列とユークリッドベクトル空間の間の双方向マップを開発する。
連続時間における長期イベント予測における最先端手法よりも提案モデルの方が優れていることを示す実験を行った。
論文 参考訳(メタデータ) (2023-11-02T06:52:44Z) - Advancing Counterfactual Inference through Nonlinear Quantile Regression [77.28323341329461]
ニューラルネットワークで実装された効率的かつ効果的な対実的推論のためのフレームワークを提案する。
提案手法は、推定された反事実結果から見つからないデータまでを一般化する能力を高める。
複数のデータセットで実施した実証実験の結果は、我々の理論的な主張に対する説得力のある支持を提供する。
論文 参考訳(メタデータ) (2023-06-09T08:30:51Z) - An End-to-End Time Series Model for Simultaneous Imputation and Forecast [14.756607742477252]
我々は,推論関係を学習し,複数段階の予測を行うために,エンドツーエンドの時系列モデルを開発する。
我々のフレームワークは2つのニューラルネットワークを共同でトレーニングし、1つは特徴量相関を学習し、もう1つは時間的行動のモデリングを学習する。
論文 参考訳(メタデータ) (2023-06-01T15:08:22Z) - Improved Fine-tuning by Leveraging Pre-training Data: Theory and
Practice [52.11183787786718]
対象データに事前学習されたモデルを微調整することは、多くのディープラーニングアプリケーションで広く利用されている。
近年の研究では、スクラッチからのトレーニングが、この事前トレーニング戦略に比較して、最終的なパフォーマンスを示すことが実証されている。
本稿では,対象タスクの一般化を改善するために,事前学習データからサブセットを選択する新しい選択戦略を提案する。
論文 参考訳(メタデータ) (2021-11-24T06:18:32Z) - Video Prediction via Example Guidance [156.08546987158616]
ビデオ予測タスクでは、将来のコンテンツとダイナミクスのマルチモーダルな性質を捉えることが大きな課題である。
本研究では,有効な将来状態の予測を効果的に行うための,シンプルで効果的なフレームワークを提案する。
論文 参考訳(メタデータ) (2020-07-03T14:57:24Z) - Ambiguity in Sequential Data: Predicting Uncertain Futures with
Recurrent Models [110.82452096672182]
逐次データによる曖昧な予測を扱うために,Multiple hypothesis Prediction(MHP)モデルの拡張を提案する。
また、不確実性を考慮するのに適した曖昧な問題に対する新しい尺度も導入する。
論文 参考訳(メタデータ) (2020-03-10T09:15:42Z) - A Multi-Channel Neural Graphical Event Model with Negative Evidence [76.51278722190607]
イベントデータセットは、タイムライン上で不規則に発生するさまざまなタイプのイベントのシーケンスである。
基礎となる強度関数を推定するために,非パラメトリックディープニューラルネットワーク手法を提案する。
論文 参考訳(メタデータ) (2020-02-21T23:10:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。