論文の概要: Necessary and sufficient conditions for universality of Kolmogorov-Arnold networks
- arxiv url: http://arxiv.org/abs/2604.23765v1
- Date: Sun, 26 Apr 2026 15:31:51 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-28 17:12:07.537422
- Title: Necessary and sufficient conditions for universality of Kolmogorov-Arnold networks
- Title(参考訳): コルモゴロフ・アルノルドネットワークの普遍性に必要な必要十分条件
- Authors: Vugar Ismailov,
- Abstract要約: すべての連続非アフィン関数 $$ に対して、有限アフィン族 $A_$ が存在して、エッジ関数を持つ深いカンが$A_cup$ で普遍的であることを示す。
また、Liu らによって導入されたスプラインベースのエッジパラメータ化を持つ Kans が古典的な意味での普遍近似であることを示す。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We analyze the universal approximation property of Kolmogorov-Arnold Networks (KANs) in terms of their edge functions. If these functions are all affine, then universality clearly fails. How many non-affine functions are needed, in addition to affine ones, to ensure universality? We show that a single one suffices. More precisely, we prove that deep KANs in which all edge functions are either affine or equal to a fixed continuous function $σ$ are dense in $C(K)$ for every compact set $K\subset\mathbb{R}^n$ if and only if $σ$ is non-affine. In contrast, for KANs with exactly two hidden layers, universality holds if and only if $σ$ is nonpolynomial. We further show that the full class of affine functions is not required; it can be replaced by a finite set without affecting universality. In particular, in the nonpolynomial case, a fixed family of five affine functions suffices when the depth is arbitrary. More generally, for every continuous non-affine function $σ$, there exists a finite affine family $A_σ$ such that deep KANs with edge functions in $A_σ\cup\{σ\}$ remain universal. We also prove that KANs with the spline-based edge parameterization introduced by Liu et al.~\cite{Liu2024} are universal approximators in the classical sense, even when the spline degree and knot sequence are fixed in advance.
- Abstract(参考訳): コルモゴロフ・アルノルドネットワーク(KAN)の普遍近似特性をエッジ関数の観点から解析する。
これらの関数がすべてアフィンであれば、普遍性は明らかに失敗する。
普遍性を保証するために、アフィン関数に加えて、どのくらいの非アフィン関数が必要か?
私たちは一人が十分であることを示す。
より正確には、すべての辺函数がアフィンか固定連続函数に等しいような深いカンが、すべてのコンパクト集合 $K\subset\mathbb{R}^n$ に対して、$σ$ が非アフィンであることと、$σ$ が非アフィンであることを証明する。
対照的に、ちょうど2つの隠れた層を持つカンに対して、普遍性は、$σ$ が非ポリノミカルであるときにのみ成り立つ。
さらに、アフィン函数の全類は必要ないことを示し、普遍性に影響を与えることなく有限集合に置き換えることができる。
特に、非多項式の場合、5つのアフィン函数の固定族は、深さが任意のときに十分である。
より一般に、すべての連続な非アフィン函数 $σ$ に対して、有限アフィン族 $A_σ$ が存在して、これは、辺函数が $A_σ\cup\{σ\}$ の深いカンが普遍的である。
また、Lou et al ~\cite{Liu2024} によって導入されたスプラインベースのエッジパラメータ化を持つkan が、スプライン次数と結び目列が予め固定されている場合でも、古典的な意味で普遍的な近似であることを示す。
関連論文リスト
- Uniform $\mathcal{C}^k$ Approximation of $G$-Invariant and Antisymmetric
Functions, Embedding Dimensions, and Polynomial Representations [0.0]
必要な埋め込み次元は、対象関数の正則性、所望の近似の精度、および$k$に依存しないことを示す。
また、$K$の上と下の境界も提供し、$K$が対象関数の正則性、所望の近似精度、および$k$とは独立であることを示す。
論文 参考訳(メタデータ) (2024-03-02T23:19:10Z) - A Minimal Control Family of Dynamical Systems for Universal Approximation [5.217870815854702]
普遍近似特性(UAP)は、ディープラーニングにおいて基本的な位置を占める。
コンパクト領域上の連続函数を近似できることを示す。
この結果から,ニューラルネットワークと制御系との近似力の相関関係が明らかとなった。
論文 参考訳(メタデータ) (2023-12-20T10:36:55Z) - A Unified Framework for Uniform Signal Recovery in Nonlinear Generative
Compressed Sensing [68.80803866919123]
非線形測定では、ほとんどの先行結果は一様ではない、すなわち、すべての$mathbfx*$に対してではなく、固定された$mathbfx*$に対して高い確率で保持される。
本フレームワークはGCSに1ビット/一様量子化観測と単一インデックスモデルを標準例として適用する。
また、指標集合が計量エントロピーが低い製品プロセスに対して、より厳密な境界を生み出す濃度不等式も開発する。
論文 参考訳(メタデータ) (2023-09-25T17:54:19Z) - Universal approximation with complex-valued deep narrow neural networks [0.0]
境界幅と任意の深さを持つ複素数値ニューラルネットワークの普遍性について検討する。
より狭い複素数値ネットワークは、その活性化関数が正則でもなく、反正則でもなく、$mathbbR$-affineでもない場合に限り普遍であることを示す。
論文 参考訳(メタデータ) (2023-05-26T13:22:14Z) - Quantum and classical low-degree learning via a dimension-free Remez
inequality [52.12931955662553]
ハイパーグリッド上の関数をポリトーラス上の高調波拡張に関連付ける新しい方法を示す。
巡回群 $exp(2pi i k/K)_k=1K$ の積に対して函数の上限が$f$であることを示す。
我々は最近、超キューブやキュービット上の観測可能な観測値の低次学習を、同様に効率的に行う方法として、EI22, CHP, VZ22を引用して、新しい空間に拡張した。
論文 参考訳(メタデータ) (2023-01-04T04:15:40Z) - Submodular + Concave [53.208470310734825]
第一次最適化法が凹関数の最大目的値に収束できることはよく確立されている。
本研究では、滑らかな函数凸体(英語版)の行列式を$F(x) = G(x) +C(x)$で始める。
このクラスの函数は、保証がないような凹凸函数と連続DR-部分モジュラ函数の両方の拡張である。
論文 参考訳(メタデータ) (2021-06-09T01:59:55Z) - Finding Global Minima via Kernel Approximations [90.42048080064849]
関数評価のみに基づく滑らかな関数のグローバル最小化を考える。
本稿では,近似関数を共同でモデル化し,大域的最小値を求める手法を検討する。
論文 参考訳(メタデータ) (2020-12-22T12:59:30Z) - A deep network construction that adapts to intrinsic dimensionality
beyond the domain [79.23797234241471]
本稿では,ReLUを活性化したディープネットワークを用いて,2層合成の近似を$f(x) = g(phi(x))$で検討する。
例えば、低次元埋め込み部分多様体への射影と、低次元集合の集合への距離である。
論文 参考訳(メタデータ) (2020-08-06T09:50:29Z) - Minimum Width for Universal Approximation [91.02689252671291]
我々は、$Lp$関数の普遍近似に必要な最小幅がちょうど$maxd_x+1,d_y$であることを証明する。
また、同じ結論がReLUと一様近似に当てはまるのではなく、追加のしきい値アクティベーション関数で成り立つことを証明している。
論文 参考訳(メタデータ) (2020-06-16T01:24:21Z) - A closer look at the approximation capabilities of neural networks [6.09170287691728]
1つの隠れた層を持つフィードフォワードニューラルネットワークは、任意の連続関数$f$を任意の近似しきい値$varepsilon$に近似することができる。
この均一な近似特性は、重量に強い条件が課せられているにもかかわらず、依然として維持されていることを示す。
論文 参考訳(メタデータ) (2020-02-16T04:58:43Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。