論文の概要: Nonparametric Instrumental Variable Regression with Observed Covariates
- arxiv url: http://arxiv.org/abs/2511.19404v1
- Date: Mon, 24 Nov 2025 18:42:49 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-11-25 18:34:25.370945
- Title: Nonparametric Instrumental Variable Regression with Observed Covariates
- Title(参考訳): 観測された共変量をもつ非パラメトリック機器可変回帰
- Authors: Zikai Shen, Zonghao Chen, Dimitri Meunier, Ingo Steinwart, Arthur Gretton, Zhu Li,
- Abstract要約: 観測された共変量を持つ非パラメトリックな楽器変数回帰の問題をNPIV-Oと呼ぶ。
観測された共変数は部分的なアイデンティティ構造を誘導し、以前のNPIV分析は適用できない。
第2の課題として、部分的平滑化の新しいフーリエ測度を導入する。
我々は、KIV-Oで上位の$L2$-learningレート、NPIV-Oで最初の$L2$-minimaxローラーラーレートを証明した。
- 参考スコア(独自算出の注目度): 32.91951875577007
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We study the problem of nonparametric instrumental variable regression with observed covariates, which we refer to as NPIV-O. Compared with standard nonparametric instrumental variable regression (NPIV), the additional observed covariates facilitate causal identification and enables heterogeneous causal effect estimation. However, the presence of observed covariates introduces two challenges for its theoretical analysis. First, it induces a partial identity structure, which renders previous NPIV analyses - based on measures of ill-posedness, stability conditions, or link conditions - inapplicable. Second, it imposes anisotropic smoothness on the structural function. To address the first challenge, we introduce a novel Fourier measure of partial smoothing; for the second challenge, we extend the existing kernel 2SLS instrumental variable algorithm with observed covariates, termed KIV-O, to incorporate Gaussian kernel lengthscales adaptive to the anisotropic smoothness. We prove upper $L^2$-learning rates for KIV-O and the first $L^2$-minimax lower learning rates for NPIV-O. Both rates interpolate between known optimal rates of NPIV and nonparametric regression (NPR). Interestingly, we identify a gap between our upper and lower bounds, which arises from the choice of kernel lengthscales tuned to minimize a projected risk. Our theoretical analysis also applies to proximal causal inference, an emerging framework for causal effect estimation that shares the same conditional moment restriction as NPIV-O.
- Abstract(参考訳): 観測された共変量を用いた非パラメトリックな楽器変数回帰の問題をNPIV-Oと呼ぶ。
標準の非パラメトリックなインスツルメンタル変数回帰(NPIV)と比較して、観測された余分な共変量は因果同定を促進し、不均一な因果効果の推定を可能にする。
しかし、観測された共変量の存在は、その理論的解析に2つの課題をもたらす。
まず、非正当性、安定性条件、リンク条件の測度に基づいて、以前のNPIV分析を描画する部分的なアイデンティティ構造を誘導する。
第二に、構造関数に異方的滑らかさを課す。
第二の課題は、既存のカーネル2SLSインストゥルメンタル変数アルゴリズムを観測された共変量(KIV-O)で拡張し、ガウスのカーネル長スケールを異方性滑らか度に適応させることである。
NPIV-Oでは,KIV-Oでは上位の$L^2$-learningレート,NPIV-Oでは最初の$L^2$-minimax低い学習レートを示す。
どちらのレートも、NPIVの既知の最適レートと非パラメトリック回帰(NPR)の間に介在する。
興味深いことに、我々は、予測されるリスクを最小限に抑えるために調整されたカーネル長スケールの選択から生じる、上界と下界のギャップを識別する。
我々の理論解析は、NPIV-Oと同じ条件のモーメント制限を共有する因果効果推定の新たな枠組みである近因果推定にも適用できる。
関連論文リスト
- Optimality and Adaptivity of Deep Neural Features for Instrumental Variable Regression [57.40108516085593]
ディープ・フィーチャー・インスツルメンタル・変数(DFIV)回帰(Deep Feature instrumental variable)は、ディープ・ニューラルネットワークによって学習されたデータ適応的特徴を用いたIV回帰に対する非パラメトリックなアプローチである。
DFIVアルゴリズムは,目的構造関数がベソフ空間にある場合,最小最適学習率を実現する。
論文 参考訳(メタデータ) (2025-01-09T01:22:22Z) - Nonparametric Instrumental Regression via Kernel Methods is Minimax Optimal [28.361133177290657]
本研究では citetsingh 2019 のカーネルインストゥルメンタル変数アルゴリズムについて検討した。
核NPIV推定器は最小ノルムのIV解に収束することを示す。
また、第1段階回帰において一般的なスペクトル正則化を採用することにより、元のカーネルNPIVアルゴリズムを改善した。
論文 参考訳(メタデータ) (2024-11-29T12:18:01Z) - Nonparametric Instrumental Variable Regression through Stochastic Approximate Gradients [0.3277163122167434]
集団リスクを直接最小化することにより,NPIV回帰に対処するための関数勾配降下アルゴリズムの定式化方法を示す。
我々は,過大なリスクに対するバウンダリの形で理論的支援を行い,提案手法の優れた安定性と競争性能を示す数値実験を行った。
このアルゴリズムは、ニューラルネットワークやカーネルベースの手法のような柔軟な推定器の選択と、非二次的損失関数を可能にする。
論文 参考訳(メタデータ) (2024-02-08T12:50:38Z) - Stable Nonconvex-Nonconcave Training via Linear Interpolation [51.668052890249726]
本稿では,ニューラルネットワークトレーニングを安定化(大規模)するための原理的手法として,線形アヘッドの理論解析を提案する。
最適化過程の不安定性は、しばしば損失ランドスケープの非単調性によって引き起こされるものであり、非拡張作用素の理論を活用することによって線型性がいかに役立つかを示す。
論文 参考訳(メタデータ) (2023-10-20T12:45:12Z) - Quantifying predictive uncertainty of aphasia severity in stroke patients with sparse heteroscedastic Bayesian high-dimensional regression [47.1405366895538]
高次元データに対する疎線型回帰法は、通常、残留物が一定の分散を持つと仮定するが、これは実際には破ることができる。
本稿では,ヘテロセダスティック分割経験的ベイズ期待条件最大化アルゴリズムを用いて,高次元ヘテロセダスティック線形回帰モデルを推定する。
論文 参考訳(メタデータ) (2023-09-15T22:06:29Z) - Minimax Instrumental Variable Regression and $L_2$ Convergence
Guarantees without Identification or Closedness [71.42652863687117]
インストゥルメンタル変数(IV)回帰の非パラメトリック推定について検討した。
固定IV解に収束できる新しいペナル化ミニマックス推定器を提案する。
ラックス条件下での推定値に対して強い$L$誤差率を導出する。
論文 参考訳(メタデータ) (2023-02-10T18:08:49Z) - Asymptotically Unbiased Instance-wise Regularized Partial AUC
Optimization: Theory and Algorithm [101.44676036551537]
One-way partial AUC (OPAUC) と Two-way partial AUC (TPAUC) はバイナリ分類器の平均性能を測定する。
既存の手法のほとんどはPAUCをほぼ最適化するしかなく、制御不能なバイアスにつながる。
本稿では,分散ロバスト最適化AUCによるPAUC問題の簡易化について述べる。
論文 参考訳(メタデータ) (2022-10-08T08:26:22Z) - Nested Nonparametric Instrumental Variable Regression [2.2984209387877628]
ショートパネルデータモデルにおけるいくつかの因果パラメータは、ネストされた非パラメトリックインスツルメンタル変数回帰(ネステッドNPIV)の機能である
最近の例では、アクセシブ、時間変化、およびプロキシ変数を用いて識別される長期的な治療効果がある。
ネストしたNPIVに対する平均平方レートと、最近同定された因果パラメータに対する効率的な推論を提供する。
論文 参考訳(メタデータ) (2021-12-28T18:29:56Z) - On Deep Instrumental Variables Estimate [21.003925102068298]
ディープインスツルメンタル変数(IV)は、内在性に対処するディープニューラルネットワークに基づくフレームワークである。
線形インスツルメンタル変数モデルにおいて,ディープニューラルネットワークを用いた2段階推定器について検討する。
2段推定器が半パラメトリック効率境界を達成することを示す。
論文 参考訳(メタデータ) (2020-04-30T17:03:00Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。