論文の概要: One-Shot Price Forecasting with Covariate-Guided Experts under Privacy Constraints
- arxiv url: http://arxiv.org/abs/2601.11977v1
- Date: Sat, 17 Jan 2026 09:13:57 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-01-21 22:47:22.403444
- Title: One-Shot Price Forecasting with Covariate-Guided Experts under Privacy Constraints
- Title(参考訳): Covariate-Guided Expertsによるプライバシー制約下でのワンショット価格予測
- Authors: Ren He, Yinliang Xu, Jinfeng Wang, Jeremy Watson, Jian Song,
- Abstract要約: そこで本稿では,トークン化と符号化の間の疎混合層を注入することにより,事前学習した予測モデルを拡張したMoEモジュールを提案する。
MoE-Encoderは、強いベースラインに比べて予測精度が大幅に向上する。
この結果から,MoE-Encoderは,基本時系列モデルに対して,スケーラブルでプライバシに配慮した拡張機能を提供することが示唆された。
- 参考スコア(独自算出の注目度): 10.464301005723968
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Forecasting in power systems often involves multivariate time series with complex dependencies and strict privacy constraints across regions. Traditional forecasting methods require significant expert knowledge and struggle to generalize across diverse deployment scenarios. Recent advancements in pre-trained time series models offer new opportunities, but their zero-shot performance on domain-specific tasks remains limited. To address these challenges, we propose a novel MoE Encoder module that augments pretrained forecasting models by injecting a sparse mixture-of-experts layer between tokenization and encoding. This design enables two key capabilities: (1) trans forming multivariate forecasting into an expert-guided univariate task, allowing the model to effectively capture inter-variable relations, and (2) supporting localized training and lightweight parameter sharing in federated settings where raw data cannot be exchanged. Extensive experiments on public multivariate datasets demonstrate that MoE-Encoder significantly improves forecasting accuracy compared to strong baselines. We further simulate federated environments and show that transferring only MoE-Encoder parameters allows efficient adaptation to new regions, with minimal performance degradation. Our findings suggest that MoE-Encoder provides a scalable and privacy-aware extension to foundation time series models.
- Abstract(参考訳): 電力システムの予測には、複雑な依存関係を持つ多変量時系列と、リージョン間の厳密なプライバシー制約が伴うことが多い。
従来の予測手法では、専門家の知識と多様なデプロイメントシナリオをまたいだ一般化に苦労する必要があった。
事前訓練された時系列モデルの最近の進歩は、新しい機会を提供するが、ドメイン固有のタスクにおけるゼロショットのパフォーマンスは、まだ限られている。
これらの課題に対処するため,トークン化と符号化の中間層を疎混合して事前学習した予測モデルを拡張したMoEエンコーダモジュールを提案する。
本設計は,(1)専門家が指導する単変量タスクに多変量予測を変換し,モデルが有変量関係を効果的に捉えること,(2)生データを交換できないフェデレート環境での局所化トレーニングと軽量パラメータ共有をサポートすること,の2つの重要な機能を実現する。
公開多変量データセットの大規模な実験により、MoE-Encoderは強いベースラインに比べて予測精度を大幅に向上することが示された。
さらに、フェデレーション環境をシミュレートし、MoE-Encoderパラメータのみを転送することで、性能劣化を最小限に抑えながら、新しい領域への効率よく適応できることを示す。
この結果から,MoE-Encoderは,基本時系列モデルに対して,スケーラブルでプライバシに配慮した拡張機能を提供することが示唆された。
関連論文リスト
- ForecastGAN: A Decomposition-Based Adversarial Framework for Multi-Horizon Time Series Forecasting [0.5213778368155993]
時系列予測は、ファイナンスからサプライチェーン管理までの領域で必須である。
本稿では,マルチホライズン予測のための新しい解析手法であるForecastGANを紹介する。
ForecastGANは、短期予測のための最先端のトランスフォーマーモデルより一貫して優れており、長期水平線では競争力を維持している。
論文 参考訳(メタデータ) (2025-11-06T15:19:23Z) - Chronos-2: From Univariate to Universal Forecasting [52.753731922908905]
Chronos-2は、一変量、多変量、共変量による予測タスクをゼロショットで処理できる事前訓練されたモデルである。
fev-bench、GIFT-Eval、Chronos Benchmark IIの3つの総合ベンチマークで最先端のパフォーマンスを提供する。
Chronos-2のコンテキスト内学習能力は、現実世界の予測パイプラインで"as is"として使用できる汎用予測モデルとして確立されている。
論文 参考訳(メタデータ) (2025-10-17T17:00:53Z) - Spatial-Temporal-Spectral Unified Modeling for Remote Sensing Dense Prediction [20.1863553357121]
リモートセンシングのための現在のディープラーニングアーキテクチャは、基本的に堅固である。
本稿では,統合モデリングのための空間時間スペクトル統一ネットワーク(STSUN)について紹介する。
STSUNは任意の空間サイズ、時間長、スペクトル帯域で入力および出力データに適応することができる。
様々な密集した予測タスクと多様な意味クラス予測を統一する。
論文 参考訳(メタデータ) (2025-05-18T07:39:17Z) - UniSTD: Towards Unified Spatio-Temporal Learning across Diverse Disciplines [64.84631333071728]
本稿では,時間的モデリングのためのトランスフォーマーベースの統合フレームワークであるbfUnistageを紹介する。
我々の研究は、タスク固有の視覚テキストが時間学習のための一般化可能なモデルを構築することができることを示した。
また、時間的ダイナミクスを明示的に組み込むための時間的モジュールも導入する。
論文 参考訳(メタデータ) (2025-03-26T17:33:23Z) - PFformer: A Position-Free Transformer Variant for Extreme-Adaptive Multivariate Time Series Forecasting [9.511600544581425]
PFformerは、単一ターゲットのMSS予測用に設計された、位置のないトランスフォーマーベースのモデルである。
PFformerは、EFE(Enhanced Feature-based Embedding)とAEE(Auto-Encoder-based Embedding)の2つの新しい埋め込み戦略を統合している。
論文 参考訳(メタデータ) (2025-02-27T22:21:27Z) - Advancing Enterprise Spatio-Temporal Forecasting Applications: Data Mining Meets Instruction Tuning of Language Models For Multi-modal Time Series Analysis in Low-Resource Settings [0.0]
パティオ時間予測は輸送、物流、サプライチェーン管理において重要である。
本稿では,従来の予測手法の強みと小言語モデルの命令チューニングを融合した動的マルチモーダル手法を提案する。
我々のフレームワークは、推論速度とデータプライバシ/セキュリティを維持しながら、計算とメモリの要求を低減したオンプレミスのカスタマイズを可能にする。
論文 参考訳(メタデータ) (2024-08-24T16:32:58Z) - Unified Training of Universal Time Series Forecasting Transformers [104.56318980466742]
マスク型ユニバーサル時系列予測変換器(モイライ)について述べる。
Moiraiは、新たに導入された大規模オープンタイムシリーズアーカイブ(LOTSA)で訓練されており、9つのドメインで27億以上の観測が行われた。
Moiraiは、フルショットモデルと比較してゼロショットの予測器として、競争力や優れたパフォーマンスを達成する。
論文 参考訳(メタデータ) (2024-02-04T20:00:45Z) - TACTiS-2: Better, Faster, Simpler Attentional Copulas for Multivariate Time Series [57.4208255711412]
パウラ理論に基づいて,最近導入されたトランスフォーマーに基づく注目パウラ(TACTiS)の簡易な目的を提案する。
結果から,実世界の予測タスクにまたがって,このモデルのトレーニング性能が大幅に向上し,最先端のパフォーマンスが達成できることが示唆された。
論文 参考訳(メタデータ) (2023-10-02T16:45:19Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。