論文の概要: Kolmogorov-Arnold Classifier Systems as Universal Approximators
- arxiv url: http://arxiv.org/abs/2609.37958v1
- Date: Tue, 29 Sep 2026 16:30:32 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-30 21:28:47.74486
- Title: Kolmogorov-Arnold Classifier Systems as Universal Approximators
- Title(参考訳): 普遍近似器としてのコルモゴロフ・アルノルド分類器システム
- Abstract要約: Learning Systemsのようなルールベースの機械学習は、関数近似の基本的なスケーラビリティのボトルネックに直面している。
従来のLCSは$n次元の入力空間を直接分割し、適切なカバレッジを得るために$mathcalO(mn)$ルールを必要とする。
この記事では、コルモゴロフ$表現定理によって導かれる規則を次元的に再編成することで、このパラダイムから脱却する。
我々は LCS,すなわち KACS がコンパクト領域上の連続函数の普遍近似であることを示す最初の構成的証明を提供する。
- 参考スコア(独自算出の注目度): 4.100550356612
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: As the input dimension $n$ grows, rule-based machine learning, such as Learning Classifier Systems (LCSs), faces a fundamental scalability bottleneck for function approximation: both rule count and parameter count grow exponentially with $n$. Traditional LCSs partition the $n$-dimensional input space directly, requiring $\mathcal{O}(m^n)$ rules for adequate coverage, where $m$ is the per-variable resolution. This article breaks from this paradigm by reorganizing rules dimension-wise, guided by the Kolmogorov-Arnold representation theorem: any continuous $n$-dimensional function can be expressed as a finite superposition of one-dimensional functions. The proposed Kolmogorov-Arnold Classifier System (KACS) decomposes the target function into one-dimensional subproblems and assigns a dedicated ruleset to each, reducing the worst-case rule count from $\mathcal{O}(m^n)$ to $\mathcal{O}(mn^2)$ and replacing $n$-dimensional local models with one-dimensional models requiring only two parameters per rule, independent of $n$. We also provide the first constructive proof that an LCS, namely KACS, is a universal approximator for continuous functions on compact domains. Evaluated against a direct $n$-dimensional input space partitioning approach under otherwise identical conditions, KACS achieves competitive accuracy in many settings while using only 2\% to 40\% of the parameters. Our implementation is available at https://github.com/YNU-NakataLab/KACS.
- Abstract(参考訳): 入力次元$n$が大きくなるにつれて、Learning Classifier Systems (LCSs)のようなルールベースの機械学習は、関数近似の基本的なスケーラビリティのボトルネックに直面している。
従来のLCSは$n$次元の入力空間を直接分割し、適切なカバレッジのために$\mathcal{O}(m^n)$ルールを必要とする。
この記事では、コルモゴロフ=アルノルドの表現定理によって導かれる規則を次元的に再編成することで、このパラダイムから分解する:任意の連続$n$-次元函数は、一次元函数の有限重ね合わせとして表すことができる。
提案されたコルモゴロフ・アルノルド分類システム(KACS)は、ターゲット関数を1次元のサブプロブレムに分解し、それぞれに専用のルールセットを割り当て、最悪のルールのカウントを$\mathcal{O}(m^n)$から$\mathcal{O}(mn^2)$に減らし、$n$次元の局所モデルを1次元のモデルに置き換える。
また、LCS、すなわちKACSがコンパクト領域上の連続函数の普遍近似であることを示す最初の構成的証明も提供する。
直接$n$次元の入力空間分割手法に対して、KACSはパラメータの2~40%しか使用せず、多くの設定において競合精度を達成する。
実装はhttps://github.com/YNU-NakataLab/KACSで公開しています。
関連論文リスト
- SQUARE: Structured Quantum Representation Adapters as Compact Quadratic Feature Maps for Frozen Language Models [50.300302932452006]
凍結言語モデル(LM)は、下流の再ランク付け、スコアリング、嗜好モデリングのための固定された特徴抽出器として、ますます使われている。
本稿では、ボトルネックベクトルを振幅符号化し、パラメータ化量子回路を適用し、その結果の状態を測定する構造量子表現アダプタを提案する。
各基底確率関数は、ちょうどボトルネック座標における正規化された二次形式であり、追加のPauli$Z$読み出しはそれらの確率の線形結合であることを示す。
論文 参考訳(メタデータ) (2026-09-29T09:38:29Z) - Generalized $\mathbb{Z}_p$ toric codes as qudit low-density parity-check codes [5.692499671837265]
ツイスト境界条件下での正方格子上の素次元四重項上の2次元変換不変CSS安定化符号について検討した。
最もよく観察された$k d2$は$p$で増加し、相互作用範囲がシステムサイズで大きくなると、$k d2 = 0.0541, n2ln p + 3.84, n$がBravyi--Poulin--Terhal型トレードオフと互換性を持つ。
論文 参考訳(メタデータ) (2026-02-23T18:59:31Z) - On the Intrinsic Dimensions of Data in Kernel Learning [1.675218291152252]
ラプラスカーネルのようなカーネルの場合、実効次元$d_K$はミンコフスキー次元$d_$よりもかなり小さく、正則領域で証明可能であることを示す。
以上の結果から,Laplaceカーネルのようなカーネルの場合,実効次元$d_K$は,通常のドメインに有するMinkowski次元$d_$よりも著しく小さいことが分かる。
論文 参考訳(メタデータ) (2026-01-22T17:32:24Z) - Parameter-free Algorithms for the Stochastically Extended Adversarial Model [59.81852138768642]
拡張逆数(SEA)モデルの既存のアプローチは、ドメインの直径$D$や損失関数のリプシッツ定数$G$といった問題固有のパラメータの事前知識を必要とする。
パラメータを不要にするためにOptimistic Online Newton Step (OONS) アルゴリズムを利用するパラメータフリー手法を開発した。
論文 参考訳(メタデータ) (2025-10-06T10:53:37Z) - Learning with Norm Constrained, Over-parameterized, Two-layer Neural Networks [54.177130905659155]
近年の研究では、再生カーネルヒルベルト空間(RKHS)がニューラルネットワークによる関数のモデル化に適した空間ではないことが示されている。
本稿では,有界ノルムを持つオーバーパラメータ化された2層ニューラルネットワークに適した関数空間について検討する。
論文 参考訳(メタデータ) (2024-04-29T15:04:07Z) - Tighter Learning Guarantees on Digital Computers via Concentration of Measure on Finite Spaces [7.373617024876726]
デジタルコンピュータ上での学習モデルに適した一般化の族を$c_m/N1/ (2vee m)_m=1infty$とする。
パラメータ $m$ を$N$ に従って調整すると、実用的なサンプルサイズに対するより厳密な一般化境界が$N$ となる。
一般化境界の族は、有限距離空間における測度集中に対する新しい非漸近結果に基づいて定式化される。
論文 参考訳(メタデータ) (2024-02-08T11:23:11Z) - Parameterized Approximation Schemes for Clustering with General Norm
Objectives [0.6956677722498498]
本稿では、$(k,epsilon)$-approximationアルゴリズムを$k$-clustering問題に対して設計する、よく研究されている方式について考察する。
私たちの主な貢献は、クリーンでシンプルなEPASで、10以上のクラスタリング問題を解決しています。
論文 参考訳(メタデータ) (2023-04-06T15:31:37Z) - Small Covers for Near-Zero Sets of Polynomials and Learning Latent
Variable Models [56.98280399449707]
我々は、s$ of cardinality $m = (k/epsilon)o_d(k1/d)$ に対して $epsilon$-cover が存在することを示す。
構造的結果に基づいて,いくつかの基本的高次元確率モデル隠れ変数の学習アルゴリズムを改良した。
論文 参考訳(メタデータ) (2020-12-14T18:14:08Z) - On the Modularity of Hypernetworks [103.1147622394852]
構造化対象関数の場合、ハイパーネットワークにおけるトレーニング可能なパラメータの総数は、標準ニューラルネットワークのトレーニング可能なパラメータの数や埋め込み法よりも桁違いに小さいことを示す。
論文 参考訳(メタデータ) (2020-02-23T22:51:52Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。