論文の概要: Non asymptotic estimation lower bounds for LTI state space models with
Cram\'er-Rao and van Trees
- arxiv url: http://arxiv.org/abs/2109.08582v1
- Date: Fri, 17 Sep 2021 15:00:25 GMT
- ステータス: 処理完了
- システム内更新日: 2021-09-20 14:30:34.924803
- Title: Non asymptotic estimation lower bounds for LTI state space models with
Cram\'er-Rao and van Trees
- Title(参考訳): Cram\'er-Rao および van Tree を用いた LTI 状態空間モデルに対する非漸近推定下界
- Authors: Boualem Djehiche and Othmane Mazhar
- Abstract要約: 本研究では,未知の共分散のガウス励起を持つ線形時間不変(LTI)状態空間モデルに対する推定問題について検討する。
予測される推定誤差と最小二乗推定器の平均二乗推定リスクに対して非下界を与える。
その結果, 推定リスクを期待して, 既存の下限を下限に拡張し, 改善した。
- 参考スコア(独自算出の注目度): 1.14219428942199
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We study the estimation problem for linear time-invariant (LTI) state-space
models with Gaussian excitation of an unknown covariance. We provide non
asymptotic lower bounds for the expected estimation error and the mean square
estimation risk of the least square estimator, and the minimax mean square
estimation risk. These bounds are sharp with explicit constants when the matrix
of the dynamics has no eigenvalues on the unit circle and are rate-optimal when
they do. Our results extend and improve existing lower bounds to lower bounds
in expectation of the mean square estimation risk and to systems with a general
noise covariance. Instrumental to our derivation are new concentration results
for rescaled sample covariances and deviation results for the corresponding
multiplication processes of the covariates, a differential geometric
construction of a prior on the unit operator ball of small Fisher information,
and an extension of the Cram\'er-Rao and van Treesinequalities to matrix-valued
estimators.
- Abstract(参考訳): 未知の共分散のガウス励起を持つ線形時間不変(LTI)状態空間モデルに対する推定問題について検討する。
予測推定誤差と最小二乗推定器の平均二乗推定リスクと最小二乗推定リスクに対して漸近的でない下界を与える。
これらの境界は、動力学の行列が単位円上に固有値を持たないとき、明示的な定数でシャープであり、その場合のレート最適である。
提案手法は, 平均二乗推定リスクと一般騒音共分散系を想定し, 既存の下限を下限まで拡張し, 改善する。
我々の導出には、共変数の対応する乗算過程に対する再スケールサンプルの共分散と偏差に対する新しい濃度結果、小さなフィッシャー情報の単位作用素球上の事前の微分幾何学的構成、行列値推定器へのCram\'er-Raoとvan Treesinequalityの拡張が含まれる。
関連論文リスト
- Natural Bayesian Cram\'er-Rao Bound with an Application to Covariance
Estimation [53.28838377722963]
推定パラメータが多様体内にあり、先行分布に従う場合、新しいCram'er-Rao Bound (CRB) を開発する。
この導出は、幾何学的性質に基づく誤差基準とこの新しい境界との間の自然な不等式をもたらす。
論文 参考訳(メタデータ) (2023-11-08T15:17:13Z) - Statistical Estimation Under Distribution Shift: Wasserstein
Perturbations and Minimax Theory [24.540342159350015]
我々はWasserstein分布シフトに注目し、各データポイントがわずかに摂動する可能性がある。
データポイント間の独立あるいは協調的な関節シフトである摂動について検討する。
位置推定,線形回帰,非パラメトリック密度推定など,いくつかの重要な統計問題を解析する。
論文 参考訳(メタデータ) (2023-08-03T16:19:40Z) - Batches Stabilize the Minimum Norm Risk in High Dimensional
Overparameterized Linear Regression [21.83136833217205]
バッチ分割は計算効率と性能のトレードオフとして有用であることを示す。
最小ノルム推定器の自然な小バッチ版を提案し、その2次リスクの上限を導出する。
我々の境界は、新しい手法の組み合わせ、特にランダム部分空間上の雑音射影のワッサーシュタイン計量の正規近似によって導かれる。
論文 参考訳(メタデータ) (2023-06-14T11:02:08Z) - Learning to Estimate Without Bias [57.82628598276623]
ガウスの定理は、重み付き最小二乗推定器は線形モデルにおける線形最小分散アンバイアスド推定(MVUE)であると述べている。
本稿では、バイアス制約のあるディープラーニングを用いて、この結果を非線形設定に拡張する第一歩を踏み出す。
BCEの第二の動機は、同じ未知の複数の推定値が平均化されてパフォーマンスが向上するアプリケーションにおいてである。
論文 参考訳(メタデータ) (2021-10-24T10:23:51Z) - Near-optimal inference in adaptive linear regression [60.08422051718195]
最小二乗法のような単純な方法でさえ、データが適応的に収集されるときの非正規な振る舞いを示すことができる。
我々は,これらの分布異常を少なくとも2乗推定で補正するオンラインデバイアス推定器のファミリーを提案する。
我々は,マルチアームバンディット,自己回帰時系列推定,探索による能動的学習などの応用を通して,我々の理論の有用性を実証する。
論文 参考訳(メタデータ) (2021-07-05T21:05:11Z) - Divergence Frontiers for Generative Models: Sample Complexity,
Quantization Level, and Frontier Integral [58.434753643798224]
多様性フロンティアは生成モデルの評価フレームワークとして提案されている。
分岐フロンティアのプラグイン推定器のサンプル複雑性の非漸近的境界を確立する。
また,スムーズな分布推定器の統計的性能を調べることにより,分散フロンティアの枠組みも強化する。
論文 参考訳(メタデータ) (2021-06-15T06:26:25Z) - Over-the-Air Statistical Estimation [4.082216579462796]
2乗誤差損失下でのガウス多重アクセスチャネル(MAC)上の分散ミニマックス統計推定のためのスキームと下限について検討する。
物理層を用いた推定手法は,物理層抽象に依存したディジタルスキームによる推定誤差を大幅に低減することを示した。
論文 参考訳(メタデータ) (2021-03-06T03:07:22Z) - Learning Minimax Estimators via Online Learning [55.92459567732491]
確率分布のパラメータを推定するミニマックス推定器を設計する際の問題点を考察する。
混合ケースナッシュ平衡を求めるアルゴリズムを構築した。
論文 参考訳(メタデータ) (2020-06-19T22:49:42Z) - Minimax Optimal Estimation of KL Divergence for Continuous Distributions [56.29748742084386]
Kullback-Leibler の同一および独立に分布するサンプルからの発散は、様々な領域において重要な問題である。
単純で効果的な推定器の1つは、これらのサンプル間の近辺 k に基づいている。
論文 参考訳(メタデータ) (2020-02-26T16:37:37Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。