論文の概要: Layer-wise Lipschitz-Product Control for Deep Kolmogorov--Arnold Network Representations of Compositionally Structured Functions
- arxiv url: http://arxiv.org/abs/2604.26444v1
- Date: Wed, 29 Apr 2026 08:55:49 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-30 15:59:36.321187
- Title: Layer-wise Lipschitz-Product Control for Deep Kolmogorov--Arnold Network Representations of Compositionally Structured Functions
- Title(参考訳): 深いコルモゴロフに対する層ワイドリプシッツ生成制御--組成構造関数のアルノルドネットワーク表現
- Authors: Aleksander Tankman,
- Abstract要約: リプシッツ積は入力次元 n の独立な一次領域感受性境界を満たす。
実験では、いくつかの構成的構造化関数に対して P(KAN)=1.0 を確認する。
- 参考スコア(独自算出の注目度): 51.56484100374058
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We prove that any continuous function f from [0,1]^n to R representable by a finite computation tree with N internal nodes and compositional sparsity s = O(1) admits a deep Kolmogorov-Arnold Network (KAN) representation. Each internal node is realised by a primitive KAN block with controlled block depth and Lipschitz product. The layer-wise Lipschitz product satisfies the primary domain-sensitive bound independent of the input dimension n. It simplifies to P(KAN_f) <= max(C*,1)^L_f with L_f <= c_max * N. For the standard operations {+,-,x,sin,cos} with x nodes on [0,1]-bounded inputs we obtain P(KAN) <= 1. Layer widths satisfy n_l <= n + 2 w_max * N. The uniform approximation error is bounded by N * max(C*,1)^d(f) * epsilon_Op (simplifies when C* <=1). For f in C^m we obtain optimal B-spline rates. Range bounds are also derived (B_f <= N+1 for additive trees). This addresses the gap on Lipschitz control in deep KAN stacks noted by Liu et al. (2024). Experiments confirm P(KAN)=1.0 for several compositionally structured functions.
- Abstract(参考訳): 我々は、[0,1]^n から R への連続函数 f が N 個の内部ノードを持つ有限計算木で表現可能であることを証明し、構成空間 s = O(1) は深いコルモゴロフ・アルノルドネットワーク (KAN) 表現を許容する。
各内部ノードは、制御されたブロック深さとリプシッツ積を持つプリミティブなkanブロックによって実現される。
層ワイドのリプシッツ積は入力次元 n の独立な一次領域感受性有界を満たす。
P(KAN_f) <= max(C*,1)^L_f with L_f <= c_max * N. 標準演算 {+,-,x,sin,cos} with x node with [0,1]-bounded inputs 我々は P(KAN) <= 1 を得る。
均一近似誤差は N * max(C*,1)^d(f) * epsilon_Op (C* <=1 を単純化する) で有界である。
C^m の f に対して最適な B-スプラインレートを得る。
範囲境界も導出される(加法木に対する B_f <= N+1)。
このことは、Liu et al (2024) によって指摘された深いカンスタックにおけるリプシッツ制御のギャップに対処する。
実験では、いくつかの構成的構造化関数に対して P(KAN)=1.0 を確認する。
関連論文リスト
- Topological DeepONets and a generalization of the Chen-Chen operator approximation theorem [0.0]
関数空間間で作用する非線形演算子を近似するための分岐トランクニューラルアーキテクチャを提供する。
我々の主定理は、連続作用素 $G:Vto C(K;mathbbRm)$, ここで、$Vsubset X$ と $KsubsetmathbbRd$ はコンパクトであり、そのような位相的DeepONetsによって一様近似できることを示している。
論文 参考訳(メタデータ) (2026-03-12T14:23:35Z) - Tripartite information of free fermions: a universal entanglement coefficient from the sine kernel [51.56484100374058]
自由フェルミオンの3分割情報I_3を3つの隣接する幅wに分割した2次元格子上で検討する。
g(z) は z* = 1.329 +/- 0.001: で一意な零点を持ち、k_F w z* のモードは相互情報の独占に反する。
z ln z の領域法則項と z2 の項の2つの正確なキャンセルは、I_3 の組み合わせに固有のものである。
論文 参考訳(メタデータ) (2026-03-03T15:39:35Z) - Optimal Convergence Rates of Deep Neural Network Classifiers [25.56187933090708]
Tsybakovノイズ条件下での2値分類問題を$[0,1]d$で検討する。
分類器の過大な0-1リスクに対する最適収束率は$$ left ( frac1n right)fracbetacdot (1wedgebeta)qfracd_*s+1+ (1+frac1s+1)cdotbetacdot (1wedgebeta)q;
論文 参考訳(メタデータ) (2025-06-17T18:13:09Z) - Polynomial Width is Sufficient for Set Representation with
High-dimensional Features [69.65698500919869]
DeepSetsは集合表現のための最も広く使われているニューラルネットワークアーキテクチャである。
a) 線形 + パワーアクティベーション (LP) と (b) 線形 + 指数的アクティベーション (LE) の2つの集合要素埋め込み層を示す。
論文 参考訳(メタデータ) (2023-07-08T16:00:59Z) - A Law of Robustness beyond Isoperimetry [84.33752026418045]
我々は、任意の分布上でニューラルネットワークパラメータを補間する頑健性の低い$Omega(sqrtn/p)$を証明した。
次に、$n=mathrmpoly(d)$のとき、スムーズなデータに対する過度なパラメータ化の利点を示す。
我々は、$n=exp(omega(d))$ のとき、$O(1)$-Lipschitz の頑健な補間関数の存在を否定する。
論文 参考訳(メタデータ) (2022-02-23T16:10:23Z) - Deep neural network approximation of analytic functions [91.3755431537592]
ニューラルネットワークの空間に エントロピーバウンド 片方向の線形活性化関数を持つ
我々は、ペナル化深部ニューラルネットワーク推定器の予測誤差に対するオラクルの不等式を導出する。
論文 参考訳(メタデータ) (2021-04-05T18:02:04Z) - Optimal Approximation Rate of ReLU Networks in terms of Width and Depth [5.37133760455631]
本稿では,深部フィードフォワードニューラルネットワークの幅と深さの近似力に着目した。
幅$mathcalObig(maxdlfloor N1/drfloor,, N+2big)$と深さ$mathcalO(L)$のReLUネットワークは、近似レート$mathcalObig(lambdasqrtd (N2L2ln)で$[0,1]d$のH"古い連続関数を近似できる。
論文 参考訳(メタデータ) (2021-02-28T13:15:55Z) - Deep regularization and direct training of the inner layers of Neural
Networks with Kernel Flows [0.609170287691728]
カーネルフロー(KF)に基づくニューラルネットワーク(ANN)の新しい正規化手法を提案する。
KFは、データセットのランダムバッチのポイント数を半分にすることで得られる精度の損失を最小限に抑え、回帰/クリギングにおけるカーネル選択の方法として導入された。
論文 参考訳(メタデータ) (2020-02-19T18:20:36Z) - Deep Network Approximation for Smooth Functions [9.305095040004156]
幅$mathcalO(Nln N)$と深さ$mathcalO(L L)$の深いReLUネットワークは、ほぼ最適近似誤差で$fin Cs([0,1]d)$を近似できることを示す。
我々の推定は、それぞれ$NinmathbbN+$と$LinmathbbN+$で指定された任意の幅と深さに対して有効であるという意味では漸近的ではない。
論文 参考訳(メタデータ) (2020-01-09T15:06:10Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。