論文の概要: Automatic knot selection in smooth additive models
- arxiv url: http://arxiv.org/abs/2607.21083v1
- Date: Thu, 23 Jul 2026 09:12:41 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-07-24 18:26:25.345908
- Title: Automatic knot selection in smooth additive models
- Title(参考訳): 滑らかな加法モデルにおける自動結び目選択
- Authors: Nicolás Carrizosa, Vanesa Guerrero, María Durbán,
- Abstract要約: 本稿では,適応スプライン(A-スプライン)の結び目選択手法の拡張に基づき,GAMに対する新しい明示的な結び目選択手法を提案する。
提案手法は, 各種合成および実データを用いて評価し, P-スプラインおよび最先端ノット選択手法と比較した。
- 参考スコア(独自算出の注目度): 2.2940141855172036
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: B-spline regression constitutes a widely used framework for nonparametric modeling. The performance of this methodology depends on specifying the number and placement of changepoints, known as knots, prior to the estimation process. Such knot sequence determines the dimension of the B-spline basis used to represent the regression function and the number of coefficients to be estimated. Therefore, the knots' choice affects the model's flexibility, influencing its smoothness and goodness-of-fit. Traditionally, this problem has been addressed either by explicitly selecting knots, via knot-selection algorithms, or by regularization methods, such as P-splines, which automatically tune the regressor's smoothness. The latter have become the standard in generalized additive models (GAMs). In contrast, knot-selection techniques, frequently neglected because of computational or modeling limitations, provide certain advantages which can be valuable in some contexts. In this work, we introduce a novel explicit knot-selection technique for GAMs based on an extension of the adaptive splines (A-splines) knot selection methodology, combined with a customized Fellner-Schall scheme for tuning the associated parameters. Our approach is evaluated on various synthetic and real datasets and compared with P-splines and state-of-the-art knot-selection techniques. The results indicate comparable performance, while producing models built on a substantially smaller number of basis elements.
- Abstract(参考訳): B-スプライン回帰は非パラメトリックモデリングのフレームワークとして広く使われている。
この方法論のパフォーマンスは、見積もりプロセスの前に、ノットとして知られる変更点の数と配置を指定することに依存する。
このような結び目列は、回帰関数を表すために使用されるB-スプライン基底の次元と推定される係数の数を決定する。
したがって、結び目の選択はモデルの柔軟性に影響を与え、その滑らかさと適合性に影響を与える。
伝統的に、この問題は、結び目選択アルゴリズムを介して明示的に結び目を選択するか、P-スプラインのような正規化手法によって解決されてきた。
後者は一般化加法モデル(GAM)の標準となっている。
対照的に、計算やモデリングの制限のためにしばしば無視される結び目選択技術は、いくつかの文脈で価値のある特定の利点を提供する。
本研究では,適応スプライン(A-スプライン)の結び目選択手法の拡張に基づくGAMのための新しい明示的な結び目選択手法と,関連するパラメータをチューニングするためのFellner-Schallスキームの組み合わせを提案する。
提案手法は, 各種合成および実データを用いて評価し, P-スプラインおよび最先端ノット選択手法と比較した。
結果は同等のパフォーマンスを示しながら、かなり小さなベース要素上に構築されたモデルを生成する。
関連論文リスト
- Image Segmentation via Variational Model Based Tailored UNet: A Deep Variational Framework [6.146992603795658]
画像セグメンテーションのための変分モデルに基づくTalored UNet(VM_TUNet)を提案する。
VM_TUNetは、変分法の解釈可能性とエッジ保存特性をニューラルネットワークの適応的特徴学習と組み合わせている。
既存のアプローチと比較して,VM_TUNetはセグメンテーション性能が優れていることを示す。
論文 参考訳(メタデータ) (2025-05-09T05:50:22Z) - Clustering by Nonparametric Smoothing [2.741266294612775]
クラスタリング問題の新たな定式化は、タスクを推定問題として表現するものである。
提案手法は、任意の明示的なモデリング仮定を回避し、非パラメトリックな平滑化の柔軟な推定ポテンシャルを利用する。
提案手法の強い性能を示すために,公開データセットの大規模なコレクションに関する実験が用いられている。
論文 参考訳(メタデータ) (2025-03-12T07:44:11Z) - Training Deep Learning Models with Norm-Constrained LMOs [56.00317694850397]
線形最小化オラクル(LMO)を用いて問題の幾何学に適応する新しいアルゴリズム群を提案する。
我々は,Adamに頼らずに,我々のアルゴリズムであるScionを用いたナノGPTトレーニングの大幅な高速化を示す。
論文 参考訳(メタデータ) (2025-02-11T13:10:34Z) - A model-free feature selection technique of feature screening and random
forest based recursive feature elimination [0.0]
質量特徴を持つ超高次元データのモデルフリー特徴選択法を提案する。
提案手法は選択整合性を示し, 弱正則条件下では$L$整合性を示す。
論文 参考訳(メタデータ) (2023-02-15T03:39:16Z) - Probabilistic Circuits for Variational Inference in Discrete Graphical
Models [101.28528515775842]
変分法による離散的グラフィカルモデルの推論は困難である。
エビデンス・ロウアーバウンド(ELBO)を推定するためのサンプリングに基づく多くの手法が提案されている。
Sum Product Networks (SPN) のような確率的回路モデルのトラクタビリティを活用する新しい手法を提案する。
選択的SPNが表現的変動分布として適していることを示し、対象モデルの対数密度が重み付けされた場合、対応するELBOを解析的に計算可能であることを示す。
論文 参考訳(メタデータ) (2020-10-22T05:04:38Z) - On the Adversarial Robustness of LASSO Based Feature Selection [72.54211869067979]
検討されたモデルでは、悪意のある敵がデータセット全体を観察し、レスポンス値やフィーチャーマトリックスを慎重に修正する。
両レベルの最適化問題として、敵の修正戦略を定式化する。
合成および実データを用いた数値的な例は,本手法が効率的かつ効果的であることを示している。
論文 参考訳(メタデータ) (2020-10-20T05:51:26Z) - Slice Sampling for General Completely Random Measures [74.24975039689893]
本稿では, 後続推定のためのマルコフ連鎖モンテカルロアルゴリズムについて, 補助スライス変数を用いてトランケーションレベルを適応的に設定する。
提案アルゴリズムの有効性は、いくつかの一般的な非パラメトリックモデルで評価される。
論文 参考訳(メタデータ) (2020-06-24T17:53:53Z) - Supervised Learning for Non-Sequential Data: A Canonical Polyadic
Decomposition Approach [85.12934750565971]
特徴相互作用の効率的なモデリングは、非順序的タスクに対する教師あり学習の基盤となる。
この問題を緩和するため、モデルパラメータをテンソルとして暗黙的に表現することが提案されている。
表現性を向上するため,任意の高次元特徴ベクトルに特徴写像を適用できるようにフレームワークを一般化する。
論文 参考訳(メタデータ) (2020-01-27T22:38:40Z) - Adaptive Correlated Monte Carlo for Contextual Categorical Sequence
Generation [77.7420231319632]
我々は,モンテカルロ (MC) ロールアウトの集合を分散制御のために評価する政策勾配推定器に,カテゴリー列の文脈的生成を適用する。
また,二分木ソフトマックスモデルに相関したMCロールアウトを用いることで,大語彙シナリオにおける高生成コストを低減できることを示す。
論文 参考訳(メタデータ) (2019-12-31T03:01:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。