論文の概要: From Overparameterised Expressions to Parsimonious Models: Fisher-Geometric Pruning for Symbolic Regression
- arxiv url: http://arxiv.org/abs/2610.24753v1
- Date: Sat, 17 Oct 2026 15:46:52 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-22 16:32:02.344104
- Title: From Overparameterised Expressions to Parsimonious Models: Fisher-Geometric Pruning for Symbolic Regression
- Title(参考訳): 過度にパラメータ化された表現からパロモニアスモデル:シンボリック回帰のためのフィジカル・ジオメトリ・プルーニング
- Abstract要約: 提案するFisher-Geometric pruning (FGP)は,適合モデルに作用するポストホックモデル推論フレームワークである。
FGPは、局所情報幾何学と、解釈可能なパラメトリック境界に対する明示的な互換性テストを組み合わせる。
保存中の構造的複雑さを大幅に低減し、しばしば改善され、サンプル外精度が向上する。
- 参考スコア(独自算出の注目度): 1.2774526936067927
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Genetic programming symbolic regression (GPSR) often returns expressions that are larger than necessary, with dormant branches and finely tuned algebraic configurations that fit sampling noise. Existing complexity-control strategies, such as multi-objective size-accuracy search or information criteria embedded in the fitness function, act on syntactic representations during model search. We introduce Fisher-Geometric pruning (FGP), a post-hoc model-reduction framework that acts on fitted models and can complement these techniques. FGP combines local information geometry at the maximum-likelihood solution with explicit compatibility tests for interpretable parametric boundaries. A taxonomy of parametric directions separates local sensitivity from proximity to reducible boundaries, enabling the treatment of unidentifiable directions and reductions through zero constraints, asymptotic limits, and signed parameter identifications. Candidate reductions are realised by symbolic contraction and refitting, then accepted only when their cross-validated predictive risk remains within a prescribed tolerance. We evaluate FGP on controlled diagnostic problems and Pareto fronts generated by GPSR. Across both settings, FGP substantially reduces structural complexity while preserving, and often improving, out-of-sample accuracy. Comparisons with competing pruning strategies and ablations show that, by combining geometric screening, boundary compatibility, and predictive validation, FGP yields the most consistent joint gains in parsimony and generalisation.
- Abstract(参考訳): 遺伝的プログラミング記号回帰(GPSR)は、しばしば必要以上に大きい式を返し、休眠分岐とサンプリングノイズに適合する微調整された代数的構成を持つ。
多目的サイズ精度探索やフィットネス関数に埋め込まれた情報基準といった既存の複雑性制御戦略は、モデル探索中に構文表現に作用する。
提案するFisher-Geometric pruning(FGP)は,適合モデル上で動作し,これらの手法を補完するポストホックモデル推論フレームワークである。
FGPは、最大様相解における局所情報幾何学と、解釈可能なパラメトリック境界に対する明示的な互換性テストを組み合わせる。
パラメトリックな方向の分類は、局所的な感度を近距離から再現可能な境界から切り離し、ゼロ制約、漸近的制限、および符号付きパラメータ識別を通じて、特定不可能な方向と縮小の処理を可能にする。
候補の削減は、象徴的な収縮と再適合によって実現され、その後、クロスバリデード予測リスクが所定の許容範囲内に留まっている場合にのみ受け入れられる。
制御された診断問題とGPSRによるパレートフロントにおけるFGPの評価を行った。
両方の設定で、FGPは保存中の構造的複雑さを著しく低減し、しばしばサンプル外精度を改善します。
競合するプルーニング戦略やアブレーションと比較すると、幾何学的スクリーニング、境界互換性、予測的検証を組み合わせることで、FGPはパーシモニーと一般化において最も一貫したジョイントゲインが得られる。
関連論文リスト
- COMPASS: Contextual Moment Prior Alignment for Generalizable AIGI Detection [87.91469665365304]
一般化可能なAI生成画像(AIGI)とディープフェイク検出は、非対称性現象のため難しいままである。
最近の部分空間適応法は、残留部分空間を適応させながら高次主成分を凍結することによりこの問題を軽減する。
本稿では,小さなSemantic Proxy Setを用いて,ターゲットのアクティベーション統計を推定するデータ認識サブスペース適応フレームワークを提案する。
論文 参考訳(メタデータ) (2026-10-13T09:23:12Z) - Gated Graph Neural Networks for Learning Hidden Independent Cascade Dynamics [50.02140519922548]
情報や伝染病はソーシャルネットワークを通じて広まっていますが、ノードごとのアクティベーション時間なしでは予測が難しいのです。
本研究では,Hydden Independent Cascade(HIC)モデルの下で,この逆問題について検討する。
本研究では,個々の潜伏カスケードを再構成することなく,ノードレベルのパラメータベクトルを復元するシミュレーションベースの補正推定器を提案する。
論文 参考訳(メタデータ) (2026-10-02T20:36:22Z) - Geometry-Aware Post-Hoc Uncertainty Quantification in Operator Learning [0.0]
ニューラルネットワークのためのポストホック不確実性定量化フレームワークを提案する。
REEF-GPは、演算子の固有の座標-特徴表現を適用して、幾何学的認識の不確実性を構築する。
この結果から,ニューラルネットワークのための高精度でスケーラブルなポストホックUQが,学習した特徴空間で直接実現できることが示唆された。
論文 参考訳(メタデータ) (2026-06-16T04:46:17Z) - PAC-Bayesian Adversarially Robust Generalization for Message Passing Graph Neural Networks: A Sensitivity Analysis [80.64607823130437]
PAC-BayesianフレームワークをディープニューラルネットワークからメッセージパッシングGNNまで拡張する。
我々は、対向的な設定でより強固な一般化を導出する。
論文 参考訳(メタデータ) (2026-06-04T15:31:21Z) - Influence-Guided Symbolic Regression: Scientific Discovery via LLM-Driven Equation Search with Granular Feedback [56.69850045068714]
逐次的2段階プロセスとして方程式発見をフレーム化する方法である textitInfluence-Guided Regression (IGSR) を導入する。
LLM-SRBench, 薬理学的PKPDモデル, 疫学シミュレーション, 実世界のゲノムデータなど, IGSRの有効性を示す。
論文 参考訳(メタデータ) (2026-05-27T23:48:01Z) - PAC-Bayes Bounds for Gibbs Posteriors via Singular Learning Theory [10.93258787701145]
ギブス後方に対する明示的非漸近性PAC-Bayes一般化境界を導出する。
古典的な最悪ケースの複雑性境界は、大数の均一な法則に基づいているのとは異なり、我々の分析は、平均的な後続のリスク境界をもたらす。
論文 参考訳(メタデータ) (2026-04-19T03:00:18Z) - Dendrograms of Mixing Measures for Softmax-Gated Gaussian Mixture of Experts: Consistency without Model Sweeps [41.371172458797524]
ゲーティングパラメータの共通翻訳、固有のゲート-エキスパート相互作用、およびタイトな数値-デノミネータ結合までの不特定性に対処する。
モデル選択には, 最適なパラメータ率を得る専門家の数を一貫したスイープフリーセレクタとして, デンドログラム誘導SGMoEを適応させる。
干ばつを識別できるトウモロコシの形質のデータセット上で、私たちのデンドログラム誘導SGMoEは2人の専門家を選別し、明確な混合階層を公開し、確率を早期に安定化し、解釈可能な遺伝子型フェノタイプマップを生成する。
論文 参考訳(メタデータ) (2025-10-14T17:23:44Z) - Parameter-Aware Ensemble SINDy for Interpretable Symbolic SGS Closure [0.0]
この研究は、解釈可能な偏微分方程式とサブグリッドスケール閉包を発見するためのスケーラブルでパラメータ対応のスパース回帰フレームワークを設計する。
SINDy(Sparse Identification of Dynamics)に基づいて構築されたこのアプローチは、4つの拡張を通じて鍵となる制限に対処する。
論文 参考訳(メタデータ) (2025-08-13T09:37:57Z) - Identifiable Convex-Concave Regression via Sub-gradient Regularised Least Squares [1.9580473532948397]
複雑な入力関係を凸成分と凹成分の和としてモデル化する新しい非パラメトリック回帰法を提案する。
The method-ICCNLS-decomposes sub-constrained shape-constrained additive decomposition。
論文 参考訳(メタデータ) (2025-06-22T15:53:12Z) - Last-Iterate Convergence of Adaptive Riemannian Gradient Descent for Equilibrium Computation [52.73824786627612]
本稿では,テクスト幾何学的強単調ゲームに対する新たな収束結果を確立する。
我々のキーとなる結果は、RGDがテクスト幾何学的手法で最終定位線形収束を実現することを示しています。
全体として、ユークリッド設定を超えるゲームに対して、幾何学的に非依存な最終点収束解析を初めて提示する。
論文 参考訳(メタデータ) (2023-06-29T01:20:44Z) - Identification of Probability weighted ARX models with arbitrary domains [75.91002178647165]
PieceWise Affineモデルは、ハイブリッドシステムの他のクラスに対する普遍近似、局所線型性、同値性を保証する。
本研究では,任意の領域を持つ固有入力モデル(NPWARX)を用いたPieceWise Auto Regressiveの同定に着目する。
このアーキテクチャは、機械学習の分野で開発されたMixture of Expertの概念に従って考案された。
論文 参考訳(メタデータ) (2020-09-29T12:50:33Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。