論文の概要: Sparse Orthogonal Regression Technique: A Spectral Framework for Equation Discovery, Approximation, and Integration
- arxiv url: http://arxiv.org/abs/2608.13504v1
- Date: Thu, 13 Aug 2026 17:31:27 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-08-14 18:29:38.61632
- Title: Sparse Orthogonal Regression Technique: A Spectral Framework for Equation Discovery, Approximation, and Integration
- Title(参考訳): Sparse Orthogonal Regression Technique:方程式発見・近似・統合のためのスペクトルフレームワーク
- Abstract要約: ノイズや不規則なサンプルデータから正規直交基底展開を学習するためのスパースフレームワークを開発した。
SORTは、L1正規化回帰を用いて拡張係数を推定し、明示的な二次的あるいは分析的内積評価を避けた。
中心的な応用は、データ駆動による通常の微分方程式の発見である。
- 参考スコア(独自算出の注目度): 4.389213808289583
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We develop the Sparse Orthogonal Regression Technique (SORT), a sparse spectral framework for learning orthonormal-basis expansions from noisy and irregularly sampled data. SORT estimates expansion coefficients directly from observations using L1-regularized regression, avoiding explicit quadrature or analytic inner-product evaluation. The central application is data-driven discovery of ordinary differential equations: vector fields are represented in chosen orthogonal bases and learned as sparse coefficient expansions. This provides a complementary route to symbolic regression, grammar-based discovery, and SINDy-style sparse identification by first recovering a compact spectral representation, which can later guide searches for simpler analytic forms. Across the dynamical-system experiments, SORT matches or improves upon library-based sparse-regression baselines when the basis is well adapted to the problem, and shows more stable degradation under sparse sampling, noisy derivative estimates, and representation mismatch. Specific examples illustrate why this representation is useful: if a finite library misses the problem-specific nonlinearity, the resulting model can fail. SORT is not immune to mismatch, but it shifts the problem away from brittle selection among generic terms to basis design adapted to the problem domain. The experiments also show that dominant low-order coefficients persist as model order increases, supporting order-consistent model growth. Beyond equation discovery, the same learned expansion supports nonlinear approximation and estimation of complex, high-dimensional integrals by coefficient readout. Overall, SORT provides a reusable intermediate representation for system identification, approximation, and integration, while making basis design an explicit part of the scientific modeling problem.
- Abstract(参考訳): Sparse Orthogonal Regression Technique (SORT) はノイズや不規則なサンプルデータから正規直交基底展開を学習するためのスパーススペクトルフレームワークである。
SORTは、L1規則化回帰を用いた観測から直接膨張係数を推定し、明示的な二次的あるいは分析的内積評価を避けた。
ベクトル場は選択された直交基底で表現され、スパース係数展開として学習される。
これは、シンボリック回帰、文法に基づく発見、SINDyスタイルのスパース識別への補完ルートを提供する。
動的システム実験全体を通して、SORTはライブラリベースのスパース回帰ベースラインが問題に順応すると一致または改善し、スパースサンプリング、ノイズ微分推定、表現ミスマッチによりより安定した劣化を示す。
有限ライブラリが問題固有の非線形性を欠いている場合、結果として得られるモデルは失敗する。
SORTはミスマッチに免疫がないが、問題領域に適応した基本設計に、一般的な用語の脆い選択から移行する。
また, モデル秩序が増大するにつれて, 支配的な低次係数が持続し, オーダー一貫性モデル成長をサポートすることを示した。
方程式の発見以外にも、同じ学習された拡張は、係数の読み出しによる複素高次元積分の非線形近似と推定をサポートする。
全体として、SORTは、システム識別、近似、統合のための再利用可能な中間表現を提供し、基礎設計を科学モデリング問題の明示的な一部にしている。
関連論文リスト
- PAC-Bayes Bounds for Gibbs Posteriors via Singular Learning Theory [10.93258787701145]
ギブス後方に対する明示的非漸近性PAC-Bayes一般化境界を導出する。
古典的な最悪ケースの複雑性境界は、大数の均一な法則に基づいているのとは異なり、我々の分析は、平均的な後続のリスク境界をもたらす。
論文 参考訳(メタデータ) (2026-04-19T03:00:18Z) - Spectral Path Regression: Directional Chebyshev Harmonics for Interpretable Tabular Learning [0.0]
テンソル化振動を$cos(mathbfmtoparccos(mathbfx)$という形の方向調和モードに置き換える。
この表現は、少数の構造化周波数ベクトルを選択して複雑性を制御する離散スペクトル回帰モデルを生成する。
論文 参考訳(メタデータ) (2026-04-05T12:13:59Z) - Identifiable Convex-Concave Regression via Sub-gradient Regularised Least Squares [1.9580473532948397]
複雑な入力関係を凸成分と凹成分の和としてモデル化する新しい非パラメトリック回帰法を提案する。
The method-ICCNLS-decomposes sub-constrained shape-constrained additive decomposition。
論文 参考訳(メタデータ) (2025-06-22T15:53:12Z) - eGAD! double descent is explained by Generalized Aliasing Decomposition [0.0]
本稿では,予測性能とモデル複雑性の関係を説明するため,GAD(Generalized Aliasing decomposition)と呼ぶ新しい分解法を提案する。
GADは予測誤差を3つの部分に分解する: 1) パラメータの数がデータポイントの数よりもはるかに小さい場合に支配するモデル不整合、2) データ不整合、3) パラメータの数がデータポイントの数よりはるかに大きいときに支配するデータ不整合、3) 一般化エイリアス。
論文 参考訳(メタデータ) (2024-08-15T17:49:24Z) - Scaling and renormalization in high-dimensional regression [72.59731158970894]
リッジ回帰に関する最近の結果について統一的な視点を提示する。
我々は、物理とディープラーニングの背景を持つ読者を対象に、ランダム行列理論と自由確率の基本的なツールを使用する。
我々の結果は拡張され、初期のスケーリング法則のモデルについて統一的な視点を提供する。
論文 参考訳(メタデータ) (2024-05-01T15:59:00Z) - Deep Generative Symbolic Regression [83.04219479605801]
記号回帰は、データから簡潔な閉形式数学的方程式を発見することを目的としている。
既存の手法は、探索から強化学習まで、入力変数の数に応じてスケールできない。
本稿では,我々のフレームワークであるDeep Generative Symbolic Regressionのインスタンス化を提案する。
論文 参考訳(メタデータ) (2023-12-30T17:05:31Z) - Boosting Differentiable Causal Discovery via Adaptive Sample Reweighting [62.23057729112182]
異なるスコアに基づく因果探索法は観測データから有向非巡回グラフを学習する。
本稿では,Reweighted Score関数ReScoreの適応重みを動的に学習することにより因果発見性能を向上させるためのモデルに依存しないフレームワークを提案する。
論文 参考訳(メタデータ) (2023-03-06T14:49:59Z) - Score-based Continuous-time Discrete Diffusion Models [102.65769839899315]
連続時間マルコフ連鎖を介して逆過程が認知されるマルコフジャンププロセスを導入することにより、拡散モデルを離散変数に拡張する。
条件境界分布の単純なマッチングにより、偏りのない推定器が得られることを示す。
提案手法の有効性を,合成および実世界の音楽と画像のベンチマークで示す。
論文 参考訳(メタデータ) (2022-11-30T05:33:29Z) - Nonconvex Stochastic Scaled-Gradient Descent and Generalized Eigenvector
Problems [98.34292831923335]
オンライン相関解析の問題から,emphStochastic Scaled-Gradient Descent (SSD)アルゴリズムを提案する。
我々はこれらのアイデアをオンライン相関解析に適用し、局所収束率を正規性に比例した最適な1時間スケールのアルゴリズムを初めて導いた。
論文 参考訳(メタデータ) (2021-12-29T18:46:52Z) - A Nonconvex Framework for Structured Dynamic Covariance Recovery [24.471814126358556]
時間変化のある2次統計量を持つ高次元データに対するフレキシブルで解釈可能なモデルを提案する。
文献によって動機付けられ,因子化とスムーズな時間データの定量化を行う。
私たちのアプローチは,既存のベースラインよりも優れています。
論文 参考訳(メタデータ) (2020-11-11T07:09:44Z) - Understanding Double Descent Requires a Fine-Grained Bias-Variance
Decomposition [34.235007566913396]
ラベルに関連付けられた用語への分散の解釈可能で対称的な分解について述べる。
バイアスはネットワーク幅とともに単調に減少するが、分散項は非単調な振る舞いを示す。
我々はまた、著しく豊かな現象論も分析する。
論文 参考訳(メタデータ) (2020-11-04T21:04:02Z) - Understanding Implicit Regularization in Over-Parameterized Single Index
Model [55.41685740015095]
我々は高次元単一インデックスモデルのための正規化自由アルゴリズムを設計する。
暗黙正則化現象の理論的保証を提供する。
論文 参考訳(メタデータ) (2020-07-16T13:27:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。