論文の概要: Online estimation methods for irregular autoregressive models
- arxiv url: http://arxiv.org/abs/2302.10785v1
- Date: Tue, 31 Jan 2023 19:52:04 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-26 13:58:08.040923
- Title: Online estimation methods for irregular autoregressive models
- Title(参考訳): 不規則自己回帰モデルのオンライン推定法
- Authors: Felipe Elorrieta, Lucas Osses, Matias C\'aceres, Susana Eyheramendy
and Wilfredo Palma
- Abstract要約: 現在、この問題に対処するための方法として、いわゆるオンライン学習法では、現在のパラメータ推定と新しいデータを用いて推定値を更新している。
本研究では,時系列モデルの文脈におけるパラメータ推定のための3つのオンライン学習アルゴリズムについて考察する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In the last decades, due to the huge technological growth observed, it has
become increasingly common that a collection of temporal data rapidly
accumulates in vast amounts. This provides an opportunity for extracting
valuable information through the estimation of increasingly precise models. But
at the same time it imposes the challenge of continuously updating the models
as new data become available.
Currently available methods for addressing this problem, the so-called online
learning methods, use current parameter estimations and novel data to update
the estimators. These approaches avoid using the full raw data and speeding up
the computations.
In this work we consider three online learning algorithms for parameters
estimation in the context of time series models. In particular, the methods
implemented are: gradient descent, Newton-step and Kalman filter recursions.
These algorithms are applied to the recently developed irregularly observed
autoregressive (iAR) model. The estimation accuracy of the proposed methods is
assessed by means of Monte Carlo experiments.
The results obtained show that the proposed online estimation methods allow
for a precise estimation of the parameters that generate the data both for the
regularly and irregularly observed time series. These online approaches are
numerically efficient, allowing substantial computational time savings.
Moreover, we show that the proposed methods are able to adapt the parameter
estimates quickly when the time series behavior changes, unlike batch
estimation methods.
- Abstract(参考訳): 過去数十年間、膨大な技術的成長が観察され、時間的データの収集が急速に蓄積されることがますます一般的になっている。
これにより、ますます正確なモデルの推定を通じて貴重な情報を抽出する機会が得られる。
しかし同時に、新しいデータが利用可能になると継続的にモデルを更新するという課題も課している。
この問題を解決するための現在利用可能な方法は、いわゆるオンライン学習手法であり、現在のパラメータ推定と新しいデータを使用して推定値を更新する。
これらのアプローチは、完全な生データの使用を避け、計算をスピードアップする。
本研究では,時系列モデルの文脈におけるパラメータ推定のための3つのオンライン学習アルゴリズムを検討する。
特に実装された方法は、勾配降下、ニュートンステップ、カルマンフィルタ再帰である。
これらのアルゴリズムは、最近開発された不規則に観察された自己回帰(iAR)モデルに適用される。
モンテカルロ実験により,提案手法の推定精度を評価した。
その結果、オンライン推定手法により、定期的および不規則に観測された時系列の両方でデータを生成するパラメータの正確な推定が可能となった。
これらのオンラインアプローチは数値的に効率的であり、計算時間を大幅に節約できる。
さらに,提案手法は,バッチ推定法とは異なり,時系列の挙動が変化するとパラメータ推定を迅速に適用可能であることを示す。
関連論文リスト
- Computation-Aware Gaussian Processes: Model Selection And Linear-Time Inference [55.150117654242706]
我々は、1.8万のデータポイントでトレーニングされた計算対応GPのモデル選択が、1つのGPU上で数時間以内に可能であることを示す。
この研究の結果、ガウス過程は、不確実性を定量化する能力を著しく妥協することなく、大規模なデータセットで訓練することができる。
論文 参考訳(メタデータ) (2024-11-01T21:11:48Z) - Towards Learning Stochastic Population Models by Gradient Descent [0.0]
パラメータと構造を同時に推定することで,最適化手法に大きな課題が生じることを示す。
モデルの正確な推定を実証するが、擬似的、解釈可能なモデルの推論を強制することは、難易度を劇的に高める。
論文 参考訳(メタデータ) (2024-04-10T14:38:58Z) - Safe Active Learning for Time-Series Modeling with Gaussian Processes [7.505622158856545]
時系列モデルの学習はシミュレーションや予測といった多くのアプリケーションに有用である。
本研究では,安全制約を考慮した時系列モデルを積極的に学習する問題について考察する。
提案手法は,入力空間を動的に探索することにより,時系列モデル学習に適したデータ,すなわち入力と出力の軌跡を生成する。
論文 参考訳(メタデータ) (2024-02-09T09:40:33Z) - Online Variational Sequential Monte Carlo [49.97673761305336]
我々は,計算効率が高く正確なモデルパラメータ推定とベイジアン潜在状態推定を提供する変分連続モンテカルロ法(VSMC)を構築した。
オンラインVSMCは、パラメータ推定と粒子提案適応の両方を効率よく、完全にオンザフライで実行することができる。
論文 参考訳(メタデータ) (2023-12-19T21:45:38Z) - Low-rank extended Kalman filtering for online learning of neural
networks from streaming data [71.97861600347959]
非定常データストリームから非線形関数のパラメータを推定するための効率的なオンライン近似ベイズ推定アルゴリズムを提案する。
この方法は拡張カルマンフィルタ (EKF) に基づいているが、新しい低ランク+斜角行列分解法を用いている。
変分推論に基づく手法とは対照的に,本手法は完全に決定論的であり,ステップサイズチューニングを必要としない。
論文 参考訳(メタデータ) (2023-05-31T03:48:49Z) - Better Batch for Deep Probabilistic Time Series Forecasting [15.31488551912888]
本稿では,確率的予測精度を高めるために,誤り自己相関を取り入れた新しいトレーニング手法を提案する。
本手法は,モデルトレーニングのためのD$連続時系列セグメントのコレクションとしてミニバッチを構築する。
各ミニバッチ上で時間変化の共分散行列を明示的に学習し、隣接する時間ステップ間の誤差相関を符号化する。
論文 参考訳(メタデータ) (2023-05-26T15:36:59Z) - Towards black-box parameter estimation [0.0]
弱いパラメータ構造仮定に基づいて統計モデルのパラメータを推定する新しいブラックボックス手法を開発した。
頻繁な頻度で構造化された確率に対して、これは、広範囲なシミュレートされたデータベース上でディープニューラルネットワークを事前トレーニングすることで達成される。
論文 参考訳(メタデータ) (2023-03-27T09:39:38Z) - Fast and Robust Online Inference with Stochastic Gradient Descent via
Random Scaling [0.9806910643086042]
本稿では,勾配降下アルゴリズムの平均化法により推定されるパラメータのベクトルに対するオンライン推論法を提案する。
我々のアプローチはオンラインデータで完全に運用されており、機能中心極限定理によって厳格に支えられている。
論文 参考訳(メタデータ) (2021-06-06T15:38:37Z) - Real-Time Regression with Dividing Local Gaussian Processes [62.01822866877782]
局所ガウス過程は、ガウス過程の回帰に基づく新しい、計算効率の良いモデリング手法である。
入力空間の反復的データ駆動分割により、実際にはトレーニングポイントの総数において、サブ線形計算複雑性が達成される。
実世界のデータセットに対する数値的な評価は、予測と更新の速度だけでなく、精度の点で他の最先端手法よりも有利であることを示している。
論文 参考訳(メタデータ) (2020-06-16T18:43:31Z) - Extrapolation for Large-batch Training in Deep Learning [72.61259487233214]
我々は、バリエーションのホストが、我々が提案する統一されたフレームワークでカバー可能であることを示す。
本稿では,この手法の収束性を証明し,ResNet,LSTM,Transformer上での経験的性能を厳格に評価する。
論文 参考訳(メタデータ) (2020-06-10T08:22:41Z) - Efficient Ensemble Model Generation for Uncertainty Estimation with
Bayesian Approximation in Segmentation [74.06904875527556]
アンサンブルセグメンテーションモデルを構築するための汎用的で効率的なセグメンテーションフレームワークを提案する。
提案手法では,層選択法を用いて効率よくアンサンブルモデルを生成することができる。
また,新たな画素単位の不確実性損失を考案し,予測性能を向上する。
論文 参考訳(メタデータ) (2020-05-21T16:08:38Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。