論文の概要: Targeted Highly Adaptive Lasso Minimum Loss Estimation of Target Functions
- arxiv url: http://arxiv.org/abs/2607.03824v1
- Date: Sat, 04 Jul 2026 11:16:19 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-07-07 22:26:29.732409
- Title: Targeted Highly Adaptive Lasso Minimum Loss Estimation of Target Functions
- Title(参考訳): 目標関数の高適応型ラッソ最小損失推定
- Abstract要約: 本稿では,非相似微分可能な関数パラメータを推定するための高適応ラッソを提案する。
得られたHAL-MLEは, 対象関数の次元と滑らかさのみによって決定される収束率が得られることを証明した。
- 参考スコア(独自算出の注目度): 3.9116884764050925
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We propose a Targeted Highly Adaptive Lasso for estimation of non-pathwise differentiable functional parameters such as the dose-response curve (DRC) for continuous exposure. We assume the target function lies in the $k$-th order smoothness class used to define the $k$-th order Highly Adaptive Lasso (HAL), which can be well approximated by linear spans of $k$-th order spline basis functions. We construct a projection of the true target function onto a large finite dimensional working model spanned by an initial set of $k$-th order spline basis functions, which defines a pathwise differentiable approximation of the target functional parameter. A standard TMLE is then applied with a data-adaptive initial fit, replacing the MLE targeting step with a LASSO step over HAL spline basis functions that span the target function. We prove that the resulting Targeted HAL-MLE is pointwise asymptotically normally distributed and achieves a convergence rate determined solely by the dimension and smoothness of the target function, giving dimension free rates up till $\log n$-factors. Through a simulation study for the DRC, we show that the Targeted HAL outperforms a HAL plug-in estimator in terms of bias and mean squared error. Targeted HAL offers a fully data-adaptive approach to inference on functional parameters without requiring sieve specification or parametric assumptions.
- Abstract(参考訳): 本研究では,連続露光に対する線量応答曲線 (DRC) などの非相似的機能パラメータを推定するための高適応ラッソを提案する。
対象関数は、$k$-次スムースネスクラスが$k$-次高順ラッソ(HAL)を定義するために使われると仮定し、$k$-次スプライン基底関数の線型スパンによってうまく近似できる。
対象の関数パラメータのパスワイズ微分可能な近似を定義するため、実対象関数のプロジェクションを$k$-次スプライン基底関数の初期集合で区切られた大きな有限次元作業モデル上に構築する。
次に、標準TMLEにデータ適応型初期フィットを適用し、MLEをターゲット関数にまたがるHALスプライン基底関数上のLASSOステップに置き換える。
得られたターゲットHAL-MLEは、通常点的漸近分布であり、対象関数の次元と滑らか性のみによって決定される収束率を達成し、次元自由度を$\log n$-factorsまで与える。
DRCのシミュレーション研究を通じて、ターゲットHALは、偏りと平均二乗誤差の点でHALプラグイン推定器より優れていることを示す。
Targeted HALは、仕様やパラメトリックの仮定を必要とせずに、関数パラメータの推測に完全にデータ順応的なアプローチを提供する。
関連論文リスト
- $γ$-weakly $θ$-up-concavity: Linearizable Non-Convex Optimization with Applications to DR-Submodular and OSS Functions [52.031993908548294]
このような関数の広範な近似を特徴付ける新しい一階述語条件である$-weakly $-up-concavityを導入する。
本フレームワークは,DR-サブモジュラークラスに対する最適係数を復元し,既存の近似係数を大幅に改善する。
論文 参考訳(メタデータ) (2026-02-13T22:34:44Z) - Boundary-Guided Policy Optimization for Memory-efficient RL of Diffusion Large Language Models [53.339700196282905]
大きな言語モデル(dLLM)に強化学習を適用する上で重要な課題は、その可能性関数の抽出性である。
本稿では,ELBOに基づく目的の特別に構築された下界を最大化するメモリ効率のRLアルゴリズムを提案する。
実験によると、BGPOは数学の問題解決、コード生成、計画タスクにおいて、dLLMの以前のRLアルゴリズムよりも大幅に優れていた。
論文 参考訳(メタデータ) (2025-10-13T17:47:50Z) - Gradient-free stochastic optimization for additive models [50.57026826740147]
本稿では,Polyak-Lojasiewicz あるいは強凸条件を満たす目的関数に対する雑音観測によるゼロ次最適化の問題に対処する。
対象関数は加法的構造を持ち、H"古い関数族によって特徴づけられる高次滑らか性特性を満たすと仮定する。
論文 参考訳(メタデータ) (2025-03-03T23:39:08Z) - DADA: Dual Averaging with Distance Adaptation [0.0]
凸最適化問題を解くための新しい普遍勾配法を提案する。
我々のアルゴリズムであるDADA(Dual Averaging with Distance Adaptation)は、従来の2重平均方式に基づいている。
DADAは制約のない問題にも制約のない問題にも適用できる。
論文 参考訳(メタデータ) (2025-01-17T15:40:03Z) - A Mean-Field Analysis of Neural Stochastic Gradient Descent-Ascent for Functional Minimax Optimization [90.87444114491116]
本稿では,超パラメトリック化された2層ニューラルネットワークの無限次元関数クラス上で定義される最小最適化問題について検討する。
i) 勾配降下指数アルゴリズムの収束と, (ii) ニューラルネットワークの表現学習に対処する。
その結果、ニューラルネットワークによって誘導される特徴表現は、ワッサーシュタイン距離で測定された$O(alpha-1)$で初期表現から逸脱することが許された。
論文 参考訳(メタデータ) (2024-04-18T16:46:08Z) - Parameterized Convex Minorant for Objective Function Approximation in
Amortized Optimization [0.897438370260135]
償却最適化における目的関数の近似に対して, 凸分母法 (PCM) を提案する。
提案手法では,対象関数近似器をPCMと非負のギャップ関数の和で表現し,PCMの凸PCMによって対象関数近似器を下から有界にする。
提案する対象近似器は,PCMの汎用近似器であり,PCMのグローバル展開により,目的関数近似器のグローバル最小値が得られる。
論文 参考訳(メタデータ) (2023-10-04T01:34:36Z) - Deterministic Langevin Unconstrained Optimization with Normalizing Flows [3.988614978933934]
我々は,Fokker-Planck方程式とLangevin方程式にインスパイアされたブラックボックス関数に対するグローバルで自由な代理最適化戦略を導入する。
本研究は,標準合成試験関数の最適目的に向けての競争力の向上を実証する。
論文 参考訳(メタデータ) (2023-10-01T17:46:20Z) - Nearly Minimax Optimal Reinforcement Learning for Linear Markov Decision
Processes [80.89852729380425]
そこで本研究では,最小限の最小残差である$tilde O(dsqrtH3K)$を計算効率よく実現したアルゴリズムを提案する。
我々の研究は線形 MDP を用いた最適 RL に対する完全な答えを提供する。
論文 参考訳(メタデータ) (2022-12-12T18:58:59Z) - Smoothing Policy Iteration for Zero-sum Markov Games [9.158672246275348]
ゼロサムMGの解法としてスムージングポリシロバストネス(SPI)アルゴリズムを提案する。
特に、対向ポリシーは、作用空間上の効率的なサンプリングを可能にする重み関数として機能する。
また,SPIを関数近似で拡張することにより,Smooth adversarial Actor-critic (SaAC) と呼ばれるモデルベースアルゴリズムを提案する。
論文 参考訳(メタデータ) (2022-12-03T14:39:06Z) - The Common Intuition to Transfer Learning Can Win or Lose: Case Studies for Linear Regression [26.5147705530439]
本稿では,学習対象パラメータと学習対象パラメータとの距離を正規化した線形回帰最適化として,対象タスクへの伝達学習アプローチを定義する。
十分関連するタスクに対して、最適に調整された転送学習手法が最適に調整されたリッジ回帰法より優れていることを示す。
論文 参考訳(メタデータ) (2021-03-09T18:46:01Z) - Understanding Implicit Regularization in Over-Parameterized Single Index
Model [55.41685740015095]
我々は高次元単一インデックスモデルのための正規化自由アルゴリズムを設計する。
暗黙正則化現象の理論的保証を提供する。
論文 参考訳(メタデータ) (2020-07-16T13:27:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。