論文の概要: CLT-Optimal Parameter Error Bounds for Linear System Identification
- arxiv url: http://arxiv.org/abs/2604.21270v1
- Date: Thu, 23 Apr 2026 04:25:35 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-24 14:40:06.301878
- Title: CLT-Optimal Parameter Error Bounds for Linear System Identification
- Title(参考訳): 線形システム同定のためのCLT最適パラメータ誤差境界
- Authors: Yichen Zhou, Stephen Tu,
- Abstract要約: 現状の最先端境界は,システム同定の統計的複雑さを正確に捉えていないことを示す。
具体的には、正規性を利用して、現在の境界が二乗パラメータエラーをオーバーステートする問題インスタンスのクラスを特定する。
次に,パラメータ誤差の新たな2次分解により,OLSパラメータ誤差境界をシャープし,下位項を行列値マーチンゲールとする。
- 参考スコア(独自算出の注目度): 15.678542274795412
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: There has been remarkable progress over the past decade in establishing finite-sample, non-asymptotic bounds on recovering unknown system parameters from observed system behavior. Surprisingly, however, we show that the current state-of-the-art bounds do not accurately capture the statistical complexity of system identification, even in the most fundamental setting of estimating a discrete-time linear dynamical system (LDS) via ordinary least-squares regression (OLS). Specifically, we utilize asymptotic normality to identify classes of problem instances for which current bounds overstate the squared parameter error, in both spectral and Frobenius norm, by a factor of the state-dimension of the system. Informed by this discrepancy, we then sharpen the OLS parameter error bounds via a novel second-order decomposition of the parameter error, where crucially the lower-order term is a matrix-valued martingale that we show correctly captures the CLT scaling. From our analysis we obtain finite-sample bounds for both (i) stable systems and (ii) the many-trajectories setting that match the instance-specific optimal rates up to constant factors in Frobenius norm, and polylogarithmic state-dimension factors in spectral norm.
- Abstract(参考訳): 過去10年間に、観測されたシステムの挙動から未知のシステムパラメータを復元する有限サンプル非漸近境界を確立する際、顕著な進歩があった。
しかし,従来の最小二乗回帰(OLS)を用いて離散時間線形力学系(LDS)を推定する最も基本的な設定であっても,現状の最先端境界はシステム同定の統計的複雑さを正確に捉えていない。
具体的には、スペクトルとフロベニウスノルムの両方において、電流境界が二乗パラメータ誤差を上書きする問題インスタンスのクラスを、系の状態次元の因子によって同定するために漸近正規性を用いる。
そこで, パラメータ誤差の新たな2次分解により, OLSパラメータの誤差境界をシャープし, 低次項は行列値のマーチンゲールであり, CLTスケーリングを正確に捉えていることを示す。
解析から両方の有限サンプル境界を得る。
(i)安定系及び安定系
(2)フロベニウスノルムの定数因子とスペクトルノルムの多対数的状態次元因子とのインスタンス固有最適率に一致する多軌道の設定。
関連論文リスト
- Canonical Bayesian Linear System Identification [2.9250839865200846]
ベイズフレームワーク内のLTIシステムの標準形式を紹介する。
我々は、これらの最小パラメータ化における推論がすべての不変系の力学を完全に捉えることを厳格に証明する。
このアプローチは、意味のある構造を意識した事前の使用を解放する。
論文 参考訳(メタデータ) (2025-07-15T17:58:55Z) - Identifiability and Asymptotics in Learning Homogeneous Linear ODE Systems from Discrete Observations [114.17826109037048]
通常の微分方程式(ODE)は、機械学習において最近多くの注目を集めている。
理論的な側面、例えば、統計的推定の識別可能性と特性は、いまだに不明である。
本稿では,1つの軌道からサンプリングされた等間隔の誤差のない観測結果から,同次線形ODE系の同定可能性について十分な条件を導出する。
論文 参考訳(メタデータ) (2022-10-12T06:46:38Z) - Beyond the Edge of Stability via Two-step Gradient Updates [49.03389279816152]
Gradient Descent(GD)は、現代の機械学習の強力な仕事場である。
GDが局所最小値を見つける能力は、リプシッツ勾配の損失に対してのみ保証される。
この研究は、2段階の勾配更新の分析を通じて、単純だが代表的でありながら、学習上の問題に焦点をあてる。
論文 参考訳(メタデータ) (2022-06-08T21:32:50Z) - Nonconvex Stochastic Scaled-Gradient Descent and Generalized Eigenvector
Problems [98.34292831923335]
オンライン相関解析の問題から,emphStochastic Scaled-Gradient Descent (SSD)アルゴリズムを提案する。
我々はこれらのアイデアをオンライン相関解析に適用し、局所収束率を正規性に比例した最適な1時間スケールのアルゴリズムを初めて導いた。
論文 参考訳(メタデータ) (2021-12-29T18:46:52Z) - Benign Overfitting of Constant-Stepsize SGD for Linear Regression [122.70478935214128]
帰納バイアスは 経験的に過剰フィットを防げる中心的存在です
この研究は、この問題を最も基本的な設定として考慮している: 線形回帰に対する定数ステップサイズ SGD。
我々は、(正規化されていない)SGDで得られるアルゴリズム正則化と、通常の最小二乗よりも多くの顕著な違いを反映する。
論文 参考訳(メタデータ) (2021-03-23T17:15:53Z) - Understanding Implicit Regularization in Over-Parameterized Single Index
Model [55.41685740015095]
我々は高次元単一インデックスモデルのための正規化自由アルゴリズムを設計する。
暗黙正則化現象の理論的保証を提供する。
論文 参考訳(メタデータ) (2020-07-16T13:27:47Z) - Convergence and sample complexity of gradient methods for the model-free
linear quadratic regulator problem [27.09339991866556]
本稿では,コントローラの空間を直接探索することにより,未知の計算系に対する最適制御を求める。
我々は、安定化フィードバックゲインの勾配-フローのダイナミクスセットに焦点をあてて、そのような手法の性能と効率を最小化するための一歩を踏み出した。
論文 参考訳(メタデータ) (2019-12-26T16:56:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。