論文の概要: Stabilized Higher-Order Influence Functions: Statistical Theory of a Class of Bilinear Forms
- arxiv url: http://arxiv.org/abs/2607.04743v1
- Date: Mon, 06 Jul 2026 07:27:01 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-07-07 22:26:30.071497
- Title: Stabilized Higher-Order Influence Functions: Statistical Theory of a Class of Bilinear Forms
- Title(参考訳): 安定化高次影響関数:双線型形式の統計理論
- Abstract要約: サンプル分割を伴わない新しい高次推定器を提案する。
我々は、この新しい高次推定器のクラスが同様の統計的保証を享受していることを証明する。
- 参考スコア(独自算出の注目度): 9.10554723968283
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Higher-order influence functions, introduced in a series of articles (Robins et al., 2008, 2009a; van der Vaart, 2014; Robins et al., 2016, 2023; Liu et al., 2017), are a unified framework for constructing rate-optimal point estimates of a class of statistical functionals, under various complexity-reducing assumptions on the posited statistical model that generates the observed data. Although higher-order (influence functions) estimators are theoretically appealing, they have very limited practical uptake compared to their first-order counterparts. The original higher-order estimators proposed in Robins et al. (2008) and Robins et al. (2017) involve nonparametric density estimation of multi-dimensional covariates, a highly nontrivial statistical and computational problem on its own. The density estimator is, in turn, used in the evaluation of the inverse population Gram matrix $Ω$ of a set of $k$-dimensional basis transformations of covariates. There, $k$ is allowed to be as large as $o (n^2)$. To partially address this potential shortcoming, Liu et al. (2017) restrict $k$ to $o (n)$ and instead estimate $Ω$ directly using the inverse sample Gram matrix estimator, but computed from an independent sample often obtained by sample-splitting. Liu et al. (2017) refer to this alternative estimator as the empirical higher-order estimator. Although the empirical higher-order estimator bypasses density estimation, it suffers from numerical instability due to potentially inverting a large-dimensional sample Gram matrix. In this article, we propose a new stabilized higher-order estimator without sample splitting, which exhibits more stable finite-sample performance compared to the empirical higher-order estimator, and more importantly, we prove that this new class of higher-order estimators enjoys similar statistical guarantees.
- Abstract(参考訳): 一連の論文(Robins et al , 2008 2009a; van der Vaart, 2014; Robins et al , 2016 2023; Liu et al , 2017)で紹介された高次影響関数は、観測データを生成する実証統計モデルに関する様々な複雑性還元仮定の下で、統計関数のクラスにおける速度-最適点推定を構築するための統一的なフレームワークである。
高次(影響関数)推定器は理論上は魅力的であるが、一階の推定器に比べて実効性は極めて限られている。
Robins et al (2008) と Robins et al (2017) で提案された最初の高次推定器は、非常に非自明な統計的および計算的な問題である多次元共変体の非パラメトリック密度推定を含む。
密度推定器は、共変量の$k$次元基底変換の逆集団グラム行列$Ω$の評価に使用される。
ここで、$k$ は $o (n^2)$ である。
この潜在的な欠点を部分的に解決するために、Liu et al (2017) は$k$を$o (n)$に制限し、代わりに逆サンプルグラム行列推定器を使って$Ω$を直接見積もるが、サンプル分割によってしばしば得られる独立したサンプルから計算される。
Liu et al (2017) はこの代替推定器を経験的高次推定器と呼ぶ。
実験的な高次推定器は密度推定をバイパスするが、大きな次元のサンプルグラム行列を反転させる可能性があるため、数値的な不安定さに悩まされる。
本稿では, サンプル分割のない安定化高次推定器を提案し, 実験的な高次推定器よりも安定な有限サンプル性能を示し, さらに, この新しい高次推定器は, 同様の統計的保証を享受できることを証明した。
関連論文リスト
- T-Rex: Fitting a Robust Factor Model via Expectation-Maximization [0.0]
統計的因子モデルに頑健に適合する新しい予測最大化(EM)アルゴリズムを提案する。
我々のアプローチは、楕円分布に対する散乱行列のタイラーのM-推定器に基づいている。
合成例と実例の両方について数値実験を行った。
論文 参考訳(メタデータ) (2025-05-17T18:53:06Z) - Multivariate root-n-consistent smoothing parameter free matching estimators and estimators of inverse density weighted expectations [51.000851088730684]
我々は、パラメトリックな$sqrt n $-rateで収束する、最も近い隣人の新しい修正とマッチング推定器を開発する。
我々は,非パラメトリック関数推定器は含まないこと,特に標本サイズ依存パラメータの平滑化には依存していないことを強調する。
論文 参考訳(メタデータ) (2024-07-11T13:28:34Z) - Sparse PCA with Oracle Property [115.72363972222622]
新規な正規化を伴うスパースPCAの半定緩和に基づく推定器群を提案する。
我々は、家族内の別の推定器が、スパースPCAの標準半定緩和よりも、より急激な収束率を達成することを証明した。
論文 参考訳(メタデータ) (2023-12-28T02:52:54Z) - Uncertainty Quantification of MLE for Entity Ranking with Covariates [3.2839905453386162]
本稿では,ペア比較に基づくランキング問題の統計的推定と推定について検討する。
我々は、有名なBradley-Terry-Luceモデルを拡張した新しいモデルCAREモデルを提案する。
我々は、スパース比較グラフの下で、$alpha_i*_i=1n$と$beta*$の最大確率推定器を導出する。
大規模数値研究による理論結果の検証と相互資金保有データセットへの適用について検討する。
論文 参考訳(メタデータ) (2022-12-20T02:28:27Z) - Heavy-tailed Streaming Statistical Estimation [58.70341336199497]
ストリーミング$p$のサンプルから重み付き統計推定の課題を考察する。
そこで我々は,傾きの雑音に対して,よりニュアンスな条件下での傾きの傾きの低下を設計し,より詳細な解析を行う。
論文 参考訳(メタデータ) (2021-08-25T21:30:27Z) - SLOE: A Faster Method for Statistical Inference in High-Dimensional
Logistic Regression [68.66245730450915]
実用データセットに対する予測の偏見を回避し、頻繁な不確実性を推定する改善された手法を開発している。
私たちの主な貢献は、推定と推論の計算時間をマグニチュードの順序で短縮する収束保証付き信号強度の推定器SLOEです。
論文 参考訳(メタデータ) (2021-03-23T17:48:56Z) - Computationally and Statistically Efficient Truncated Regression [36.3677715543994]
計算的かつ統計的に効率的な線形回帰の古典的問題に対する推定器を提供する。
提案手法では, トランキャット標本の負の対数類似度に代わることなく, プロジェクテッド・Descent Gradient (PSGD) を用いて推定する。
本稿では,SGDが単一層ニューラルネットワークの雑音活性化関数のパラメータを学習することを示す。
論文 参考訳(メタデータ) (2020-10-22T19:31:30Z) - Rao-Blackwellizing the Straight-Through Gumbel-Softmax Gradient
Estimator [93.05919133288161]
一般的なGumbel-Softmax推定器のストレートスルー変量の分散は、ラオ・ブラックウェル化により減少できることを示す。
これは平均二乗誤差を確実に減少させる。
これは分散の低減、収束の高速化、および2つの教師なし潜在変数モデルの性能向上につながることを実証的に実証した。
論文 参考訳(メタデータ) (2020-10-09T22:54:38Z) - Instability, Computational Efficiency and Statistical Accuracy [101.32305022521024]
我々は,人口レベルでのアルゴリズムの決定論的収束率と,$n$サンプルに基づく経験的対象に適用した場合の(不安定性)の間の相互作用に基づいて,統計的精度を得るフレームワークを開発する。
本稿では,ガウス混合推定,非線形回帰モデル,情報的非応答モデルなど,いくつかの具体的なモデルに対する一般結果の応用について述べる。
論文 参考訳(メタデータ) (2020-05-22T22:30:52Z) - Low-Rank Matrix Estimation From Rank-One Projections by Unlifted Convex
Optimization [9.492903649862761]
階数1の投影から低階行列を復元するための定式化凸を用いた推定器について検討した。
両モデルにおいて、測定値が$r2 (d+d_$2)以上の場合、推定器は高い確率で成功することを示す。
論文 参考訳(メタデータ) (2020-04-06T14:57:54Z) - Finite sample properties of parametric MMD estimation: robustness to misspecification and dependence [7.011897575776511]
推定器は、データセットの依存と外れ値の存在の両方に頑健であることを示す。
推定器の計算に用いる勾配降下アルゴリズムについて理論的研究を行う。
論文 参考訳(メタデータ) (2019-12-12T02:28:13Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。