論文の概要: Online Kernel CUSUM for Change-Point Detection
- arxiv url: http://arxiv.org/abs/2211.15070v1
- Date: Mon, 28 Nov 2022 05:08:30 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-29 20:26:52.216936
- Title: Online Kernel CUSUM for Change-Point Detection
- Title(参考訳): 変更点検出のためのオンラインカーネルCUSUM
- Authors: Song Wei, Yao Xie
- Abstract要約: 我々は、異なるウィンドウサイズを持つ並列カーネル統計セットからなるオンラインカーネル累積Sum(CUSUM)手順を開発し、未知の変更点位置を考慮に入れた。
平均走行長 (ARL) と予測検出遅延 (EDD) の2つの基本性能指標の正確な解析的近似値を得る。
我々は、$log(rm ARL)$の順序で最適なウィンドウサイズを確立し、オラクルの手順と比較して電力損失がほとんどないようにする。
- 参考スコア(独自算出の注目度): 12.4517307615083
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: We develop an online kernel Cumulative Sum (CUSUM) procedure, which consists
of a parallel set of kernel statistics with different window sizes to account
for the unknown change-point location. Compared with many existing sliding
window-based kernel change-point detection procedures, which correspond to the
Shewhart chart-type procedure, the proposed procedure is more sensitive to
small changes. We further present a recursive computation of detection
statistics, which is crucial for online procedures to achieve a constant
computational and memory complexity, such that we do not need to calculate and
remember the entire Gram matrix, which can be a computational bottleneck
otherwise. We obtain precise analytic approximations of the two fundamental
performance metrics, the Average Run Length (ARL) and Expected Detection Delay
(EDD). Furthermore, we establish the optimal window size on the order of $\log
({\rm ARL})$ such that there is nearly no power loss compared with an oracle
procedure, which is analogous to the classic result for window-limited
Generalized Likelihood Ratio (GLR) procedure. We present extensive numerical
experiments to validate our theoretical results and the competitive performance
of the proposed method.
- Abstract(参考訳): 我々は、異なるウィンドウサイズを持つ並列カーネル統計セットからなるオンラインカーネル累積Sum(CUSUM)手順を開発し、未知の変化点位置を考慮に入れた。
Shewhartチャート形式に対応する既存のスライディングウィンドウベースのカーネル変更点検出手順と比較して,提案手法は小さな変更に対してより敏感である。
さらに、オンライン処理において一定の計算量とメモリの複雑さを達成するために重要となる検出統計の再帰的計算を、計算のボトルネックとなるグラム行列全体を計算し記憶する必要がないように提示する。
本研究では,2つの基本性能指標,平均走行長(ARL)と予測検出遅延(EDD)を正確に解析する。
さらに、任意のウィンドウサイズを $\log ({\rm arl})$ の順に定め、oracle のプロシージャと比較してほとんど電力損失がないようにし、これは window-limited generalized likelihood ratio (glr) 手順の古典的な結果と類似している。
提案手法の理論的結果と競合性能を検証するため, 広範な数値実験を行った。
関連論文リスト
- Faster WIND: Accelerating Iterative Best-of-$N$ Distillation for LLM Alignment [81.84950252537618]
本稿では,反復的BONDと自己プレイアライメントの統一的なゲーム理論接続を明らかにする。
WINレート支配(WIN rate Dominance, WIND)という新しいフレームワークを構築し, 正規化利率支配最適化のためのアルゴリズムを多数提案する。
論文 参考訳(メタデータ) (2024-10-28T04:47:39Z) - Effectiveness of Constant Stepsize in Markovian LSA and Statistical
Inference [9.689344942945652]
マルコフデータを用いた線形近似 (LSA) アルゴリズムを用いて, 統計的推論における定常ステップサイズの有効性について検討した。
この結果から,データに制限がある場合には,パラメータ調整や高速収束,CIカバレッジの向上が期待できることがわかった。
論文 参考訳(メタデータ) (2023-12-18T02:51:57Z) - Low-rank extended Kalman filtering for online learning of neural
networks from streaming data [71.97861600347959]
非定常データストリームから非線形関数のパラメータを推定するための効率的なオンライン近似ベイズ推定アルゴリズムを提案する。
この方法は拡張カルマンフィルタ (EKF) に基づいているが、新しい低ランク+斜角行列分解法を用いている。
変分推論に基づく手法とは対照的に,本手法は完全に決定論的であり,ステップサイズチューニングを必要としない。
論文 参考訳(メタデータ) (2023-05-31T03:48:49Z) - A Log-Linear Non-Parametric Online Changepoint Detection Algorithm based
on Functional Pruning [5.202524136984542]
シーケンスの分布の変化を検出するために,フレキシブルな非パラメトリック手法を構築した。
機能的プルーニングのアイデアのおかげで、NP-FOCuSは観測回数の対数直線的な計算コストを持つ。
検出能力の面では、NP-FOCuSは様々な設定で現在の非パラメトリックオンライン変更ポイント技術より優れている。
論文 参考訳(メタデータ) (2023-02-06T11:50:02Z) - SreaMRAK a Streaming Multi-Resolution Adaptive Kernel Algorithm [60.61943386819384]
既存のKRRの実装では、すべてのデータがメインメモリに格納される必要がある。
KRRのストリーミング版であるStreaMRAKを提案する。
本稿では,2つの合成問題と2重振り子の軌道予測について紹介する。
論文 参考訳(メタデータ) (2021-08-23T21:03:09Z) - Fast and Robust Online Inference with Stochastic Gradient Descent via
Random Scaling [0.9806910643086042]
本稿では,勾配降下アルゴリズムの平均化法により推定されるパラメータのベクトルに対するオンライン推論法を提案する。
我々のアプローチはオンラインデータで完全に運用されており、機能中心極限定理によって厳格に支えられている。
論文 参考訳(メタデータ) (2021-06-06T15:38:37Z) - Learning Sampling Policy for Faster Derivative Free Optimization [100.27518340593284]
ランダムサンプリングではなく,ZO最適化における摂動を生成するためのサンプリングポリシを学習する,新たな強化学習ベースのZOアルゴリズムを提案する。
その結果,ZO-RLアルゴリズムはサンプリングポリシを学習することでZO勾配の分散を効果的に低減し,既存のZOアルゴリズムよりも高速に収束できることが示唆された。
論文 参考訳(メタデータ) (2021-04-09T14:50:59Z) - Balancing Rates and Variance via Adaptive Batch-Size for Stochastic
Optimization Problems [120.21685755278509]
本研究は,ステップサイズの減衰が正確な収束に必要であるという事実と,一定のステップサイズがエラーまでの時間でより速く学習するという事実のバランスをとることを目的とする。
ステップサイズのミニバッチを最初から修正するのではなく,パラメータを適応的に進化させることを提案する。
論文 参考訳(メタデータ) (2020-07-02T16:02:02Z) - High-dimensional, multiscale online changepoint detection [7.502070498889449]
ガウス的データストリームが平均的に変更されるような設定において,高次元のオンライン変更点検出のための新しい手法を提案する。
このアルゴリズムは、新しい観測におけるストレージ要件と最悪の計算複雑性の両方が、以前の観測数とは無関係であるという意味で、オンラインである。
Rパッケージ 'ocd' に実装した提案手法の有効性をシミュレーションにより検証し,その有効性を地震学データセット上で実証する。
論文 参考訳(メタデータ) (2020-03-07T21:54:09Z) - SLEIPNIR: Deterministic and Provably Accurate Feature Expansion for
Gaussian Process Regression with Derivatives [86.01677297601624]
本稿では,2次フーリエ特徴に基づく導関数によるGP回帰のスケーリング手法を提案する。
我々は、近似されたカーネルと近似された後部の両方に適用される決定論的、非漸近的、指数関数的に高速な崩壊誤差境界を証明した。
論文 参考訳(メタデータ) (2020-03-05T14:33:20Z) - Online Covariance Matrix Estimation in Stochastic Gradient Descent [10.153224593032677]
勾配降下(SGD)は,特に大規模データセットやオンライン学習においてパラメータ推定に広く用いられている。
本稿では,オンライン環境でのSGDに基づく推定値の統計的推測を定量化することを目的とする。
論文 参考訳(メタデータ) (2020-02-10T17:46:10Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。