論文の概要: Sample Complexity of the Sign-Perturbed Sums Identification Method:
Scalar Case
- arxiv url: http://arxiv.org/abs/2401.15792v1
- Date: Sun, 28 Jan 2024 22:44:41 GMT
- ステータス: 処理完了
- システム内更新日: 2024-01-30 16:40:25.571541
- Title: Sample Complexity of the Sign-Perturbed Sums Identification Method:
Scalar Case
- Title(参考訳): sign-perturbed sums identification法のサンプル複雑性:スカラーケース
- Authors: Szabolcs Szentp\'eteri and Bal\'azs Csan\'ad Cs\'aji
- Abstract要約: Sign-Perturbed Sum (SPS) は強力な有限サンプルシステム同定アルゴリズムである。
本稿では,SPS信頼区間の挙動について検討する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Sign-Perturbed Sum (SPS) is a powerful finite-sample system identification
algorithm which can construct confidence regions for the true data generating
system with exact coverage probabilities, for any finite sample size. SPS was
developed in a series of papers and it has a wide range of applications, from
general linear systems, even in a closed-loop setup, to nonlinear and
nonparametric approaches. Although several theoretical properties of SPS were
proven in the literature, the sample complexity of the method was not analysed
so far. This paper aims to fill this gap and provides the first results on the
sample complexity of SPS. Here, we focus on scalar linear regression problems,
that is we study the behaviour of SPS confidence intervals. We provide high
probability upper bounds, under three different sets of assumptions, showing
that the sizes of SPS confidence intervals shrink at a geometric rate around
the true parameter, if the observation noises are subgaussian. We also show
that similar bounds hold for the previously proposed outer approximation of the
confidence region. Finally, we present simulation experiments comparing the
theoretical and the empirical convergence rates.
- Abstract(参考訳): Sign-Perturbed Sum (SPS) は、任意の有限サンプルサイズに対して、真のデータ生成システムの信頼性領域を構築することができる強力な有限サンプルシステム識別アルゴリズムである。
SPSは一連の論文で開発され、一般の線形システムから閉ループのセットアップにおいても、非線形および非パラメトリックなアプローチまで幅広い応用がある。
SPSのいくつかの理論的性質は文献で証明されたが, これまでのところ, サンプルの複雑さは分析されなかった。
本稿では,このギャップを埋めることを目的として,SPSのサンプル複雑性に関する最初の結果を提供する。
本稿では,スカラー線形回帰問題に着目し,SPS信頼区間の挙動について検討する。
3つの異なる仮定の下、高い確率上限を提供し、観測ノイズが準ガウス的であれば、sps信頼区間の大きさは真のパラメータの周りの幾何学的速度で縮小することを示した。
また、従来提案されていた信頼領域の外部近似に類似した境界が成り立つことを示す。
最後に,理論収束率と経験収束率を比較したシミュレーション実験を行う。
関連論文リスト
- Asymptotic Time-Uniform Inference for Parameters in Averaged Stochastic Approximation [23.89036529638614]
近似(SA)におけるパラメータの時間一様統計的推測について検討する。
線形および非線形のSA問題の両方において,平均的反復のほぼ無限収束率をガウスのスケールした和に解析する。
論文 参考訳(メタデータ) (2024-10-19T10:27:26Z) - Sample Complexity of the Sign-Perturbed Sums Method [0.0]
Sign-Perturbed Sums (SPS) 法は真のシステムパラメータに対して正確で漸近的でない信頼領域を構成する。
一般線形回帰問題に対するSPSのサンプル複雑性について検討する。
SPS信頼領域の理論的境界と経験的サイズの違いを実験的に検討した。
論文 参考訳(メタデータ) (2024-09-02T13:18:53Z) - Finite-Sample Identification of Linear Regression Models with Residual-Permuted Sums [0.0]
Residual-Permuted Sums (RPS) は Sign-Perturbed Sums (SPS) アルゴリズムの代替であり、信頼性領域を構築する。
RPSは、サインを摂動させる代わりに残基を摂動させる。
これらの置換に基づく信頼領域が一般仮定の下で一様に一貫したものであるという最初の証明を提供する。
論文 参考訳(メタデータ) (2024-06-08T11:09:30Z) - A Unified Theory of Stochastic Proximal Point Methods without Smoothness [52.30944052987393]
近点法はその数値的安定性と不完全なチューニングに対する頑健性からかなりの関心を集めている。
本稿では,近位点法(SPPM)の幅広いバリエーションの包括的解析について述べる。
論文 参考訳(メタデータ) (2024-05-24T21:09:19Z) - Likelihood Ratio Confidence Sets for Sequential Decision Making [51.66638486226482]
確率に基づく推論の原理を再検討し、確率比を用いて妥当な信頼シーケンスを構築することを提案する。
本手法は, 精度の高い問題に特に適している。
提案手法は,オンライン凸最適化への接続に光を当てることにより,推定器の最適シーケンスを確実に選択する方法を示す。
論文 参考訳(メタデータ) (2023-11-08T00:10:21Z) - Fast Shapley Value Estimation: A Unified Approach [71.92014859992263]
冗長な手法を排除し、単純で効率的なシェープリー推定器SimSHAPを提案する。
既存手法の解析において、推定器は特徴部分集合からランダムに要約された値の線形変換として統一可能であることを観察する。
実験により,SimSHAPの有効性が検証され,精度の高いShapley値の計算が大幅に高速化された。
論文 参考訳(メタデータ) (2023-11-02T06:09:24Z) - Heavy-tailed Streaming Statistical Estimation [58.70341336199497]
ストリーミング$p$のサンプルから重み付き統計推定の課題を考察する。
そこで我々は,傾きの雑音に対して,よりニュアンスな条件下での傾きの傾きの低下を設計し,より詳細な解析を行う。
論文 参考訳(メタデータ) (2021-08-25T21:30:27Z) - Revisiting the Sample Complexity of Sparse Spectrum Approximation of
Gaussian Processes [60.479499225746295]
本稿では,ガウス過程に対して,パラメータ空間全体に対して同時に保持可能な保証付きスケーラブルな近似を導入する。
我々の近似は、スパーススペクトルガウス過程(SSGP)のための改良されたサンプル複雑性解析から得られる。
論文 参考訳(メタデータ) (2020-11-17T05:41:50Z) - Generalized Sliced Distances for Probability Distributions [47.543990188697734]
我々は、一般化スライス確率測定(GSPM)と呼ばれる、幅広い確率測定値の族を紹介する。
GSPMは一般化されたラドン変換に根付いており、ユニークな幾何学的解釈を持つ。
GSPMに基づく勾配流を生成モデル応用に適用し、軽度な仮定の下では、勾配流が大域的最適に収束することを示す。
論文 参考訳(メタデータ) (2020-02-28T04:18:00Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。