論文の概要: Data-Driven Variational Basis Learning Beyond Neural Networks: A Non-Neural Framework for Adaptive Basis Discovery
- arxiv url: http://arxiv.org/abs/2605.05221v1
- Date: Fri, 17 Apr 2026 23:01:34 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-11 06:56:26.608477
- Title: Data-Driven Variational Basis Learning Beyond Neural Networks: A Non-Neural Framework for Adaptive Basis Discovery
- Title(参考訳): ニューラルネットワークを越えたデータ駆動変分基底学習 - 適応基底探索のための非ニューラルネットワークフレームワーク
- Authors: Andrew Kiruluta,
- Abstract要約: 我々は,変分最適化により,データから直接基底関数を学習する非ニューラルな代替手法を開発した。
データ駆動変分基底学習(DVBL)と呼ばれる提案フレームワークは、基底原子を一次最適化変数として扱う。
これにより、明快で解釈可能で厳密な分析が可能なデータ適応基底展開が得られる。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Classical representation systems such as Fourier series, wavelets, and fixed dictionaries provide analytically tractable basis expansions, but they are not intrinsically adapted to the empirical structure of modern high-dimensional data. Neural networks overcome this limitation by learning features from data, yet they do so through layered nonlinear parameterizations that often sacrifice interpretability, explicit control over basis structure, and mathematical transparency. In this manuscript we develop a non-neural alternative that learns basis functions directly from data through variational optimization. The proposed framework, termed Data Driven Variational Basis Learning (DVBL), treats basis atoms as primary optimization variables and learns them jointly with sample-specific coefficients and, when appropriate, a latent linear evolution operator. This yields a data-adaptive basis expansion that remains explicit, interpretable, and amenable to rigorous analysis. We formulate the model, establish existence of minimizers, prove blockwise descent properties for an alternating minimization algorithm, give conditions for coefficient recovery and basis identifiability, and show how manifold and dynamical regularization can be integrated without invoking neural architectures. We also discuss the conceptual novelty of the framework relative to classical dictionary learning, spectral methods, Koopman operator methods, and deep representation learning.
- Abstract(参考訳): フーリエ級数、ウェーブレット、固定辞書などの古典的な表現系は解析的に抽出可能な基底展開を提供するが、それらは現代の高次元データの経験的構造に本質的に適応しない。
ニューラルネットワークは、データから特徴を学習することでこの制限を克服するが、しばしば解釈可能性、基底構造に対する明示的な制御、数学的透明性を犠牲にする階層化された非線形パラメータ化によって達成される。
本書では,変分最適化により,データから直接基底関数を学習する非ニューラルな代替手法を開発する。
データ駆動変分基底学習(Data Driven Variational Basis Learning, DVBL)と呼ばれるこのフレームワークは、基底原子を一次最適化変数として扱い、サンプル特異的係数と共同で学習し、適切であれば、潜在線形進化演算子として学習する。
これにより、明快で解釈可能で厳密な分析が可能なデータ適応基底展開が得られる。
モデルを定式化し、最小化アルゴリズムのブロックワイド降下特性を証明し、係数回復と基底同定可能性の条件を与え、ニューラルネットワークを起動することなく多様体と動的正規化をどのように統合できるかを示す。
また、古典辞書学習、スペクトル法、クープマン演算法、深層表現学習に対するフレームワークの概念的新規性についても論じる。
関連論文リスト
- Prior-Informed Neural Network Initialization: A Spectral Approach for Function Parameterizing Architectures [3.0098885383612104]
本稿では,データ固有のスペクトルと時間構造を利用する事前インフォームド設計手法を提案する。
ファストフーリエ変換(Fast Fourier Transform)を用いて、支配的な季節前兆を抽出する原理的手法が導入された。
合成および実世界のベンチマークの実験は、データ駆動の事前の埋め込みが収束を著しく加速することを示した。
論文 参考訳(メタデータ) (2026-03-17T11:08:52Z) - Neural-POD: A Plug-and-Play Neural Operator Framework for Infinite-Dimensional Functional Nonlinear Proper Orthogonal Decomposition [7.1950116347185995]
本稿では,プラグアンドプレイ型ニューラルオペレーターフレームワークであるNeural Proper Orthogonal Decomposition(Neural-POD)を提案する。
ニューラルPODは、ニューラルネットワークのトレーニングによって解決された残差最小化問題の系列として基礎構築を定式化する。
我々は,バーガーズ方程式やナビエストークス方程式など,複雑な分解能の異なるニューラルPODのロバスト性を示す。
論文 参考訳(メタデータ) (2026-02-17T15:01:40Z) - Improving Set Function Approximation with Quasi-Arithmetic Neural Networks [23.73257235603082]
準数学的ニューラルネットワーク(qui-arithmetic Neural Network, QUINN)を提案する。
quaNNは、一般的な集合関数分解の幅広いクラスに対する普遍近似である。
理論解析により、quarNNは共通な集合関数分解の幅広いクラスに対する普遍近似であることを示す。
論文 参考訳(メタデータ) (2026-02-04T18:36:31Z) - Efficient Parametric SVD of Koopman Operator for Stochastic Dynamical Systems [51.54065545849027]
クープマン作用素は非線形力学系を解析するための原理的なフレームワークを提供する。
VAMPnet と DPNet はクープマン作用素の主特異部分空間を学ぶために提案されている。
我々は、クープマン作用素のトップ$kの特異関数を学ぶためのスケーラブルで概念的にシンプルな方法を提案する。
論文 参考訳(メタデータ) (2025-07-09T18:55:48Z) - Nonlinear classification of neural manifolds with contextual information [6.292933471495322]
本稿では,入力空間における遅延方向を文脈情報に関連付ける理論フレームワークを提案する。
我々は、多様体幾何学と文脈相関に依存する文脈依存多様体容量の正確な公式を導出する。
我々のフレームワークの表現性の向上は、階層階層の初期段階のディープネットワークにおける表現再構成を捉えるが、以前は分析にはアクセスできない。
論文 参考訳(メタデータ) (2024-05-10T23:37:31Z) - Deep Equilibrium Assisted Block Sparse Coding of Inter-dependent
Signals: Application to Hyperspectral Imaging [71.57324258813675]
相互依存信号のデータセットは、列が強い依存を示す行列として定義される。
ニューラルネットワークは、事前に構造として機能し、基礎となる信号相互依存性を明らかにするために使用される。
ディープ・アンローリングとディープ・平衡に基づくアルゴリズムが開発され、高度に解釈可能で簡潔なディープ・ラーニング・ベース・アーキテクチャを形成する。
論文 参考訳(メタデータ) (2022-03-29T21:00:39Z) - Gone Fishing: Neural Active Learning with Fisher Embeddings [55.08537975896764]
ディープニューラルネットワークと互換性のあるアクティブな学習アルゴリズムの必要性が高まっている。
本稿では,ニューラルネットワークのための抽出可能かつ高性能な能動学習アルゴリズムBAITを紹介する。
論文 参考訳(メタデータ) (2021-06-17T17:26:31Z) - Fractal Structure and Generalization Properties of Stochastic
Optimization Algorithms [71.62575565990502]
最適化アルゴリズムの一般化誤差は、その一般化尺度の根底にあるフラクタル構造の複雑性'にバウンドできることを示す。
さらに、特定の問題(リニア/ロジスティックレグレッション、隠れ/層ニューラルネットワークなど)とアルゴリズムに対して、結果をさらに専門化します。
論文 参考訳(メタデータ) (2021-06-09T08:05:36Z) - Meta-learning using privileged information for dynamics [66.32254395574994]
Neural ODE Processモデルを拡張して、Learning Using Privileged Information設定内の追加情報を使用します。
シミュレーション動的タスクの精度とキャリブレーションを向上した実験により拡張性を検証する。
論文 参考訳(メタデータ) (2021-04-29T12:18:02Z) - Meta-learning framework with applications to zero-shot time-series
forecasting [82.61728230984099]
この研究は幅広いメタラーニングフレームワークを使って肯定的な証拠を提供する。
残余接続はメタラーニング適応機構として機能する。
我々は、ソースTSデータセット上でニューラルネットワークをトレーニングし、異なるターゲットTSデータセット上で再トレーニングすることなくデプロイできることを示します。
論文 参考訳(メタデータ) (2020-02-07T16:39:43Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。