論文の概要: Hardness of High-Dimensional Linear Classification
- arxiv url: http://arxiv.org/abs/2603.19061v1
- Date: Thu, 19 Mar 2026 15:53:41 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-03-20 17:19:06.243316
- Title: Hardness of High-Dimensional Linear Classification
- Title(参考訳): 高次元線形分類の硬さ
- Authors: Alexander Munteanu, Simon Omlor, Jeff M. Phillips,
- Abstract要約: 我々は、最大半空間離散性問題に対する次元下界の新たな指数関数を確立する。
どちらも計算幾何学と機械学習の基本的問題であり、その正確で近似的な形式である。
- 参考スコア(独自算出の注目度): 58.29089693778071
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We establish new exponential in dimension lower bounds for the Maximum Halfspace Discrepancy problem, which models linear classification. Both are fundamental problems in computational geometry and machine learning in their exact and approximate forms. However, only $O(n^d)$ and respectively $\tilde O(1/\varepsilon^d)$ upper bounds are known and complemented by polynomial lower bounds that do not support the exponential in dimension dependence. We close this gap up to polylogarithmic terms by reduction from widely-believed hardness conjectures for Affine Degeneracy testing and $k$-Sum problems. Our reductions yield matching lower bounds of $\tildeΩ(n^d)$ and respectively $\tildeΩ(1/\varepsilon^d)$ based on Affine Degeneracy testing, and $\tildeΩ(n^{d/2})$ and respectively $\tildeΩ(1/\varepsilon^{d/2})$ conditioned on $k$-Sum. The first bound also holds unconditionally if the computational model is restricted to make sidedness queries, which corresponds to a widely spread setting implemented and optimized in many contemporary algorithms and computing paradigms.
- Abstract(参考訳): 我々は、線形分類をモデル化した最大半空間離散性問題に対して、新しい指数指数的下界を確立する。
どちらも計算幾何学と機械学習の基本的問題であり、その正確で近似的な形式である。
しかし、それぞれ$O(n^d)$と$\tilde O(1/\varepsilon^d)$上界のみが知られ、次元依存の指数性をサポートしない多項式の下界によって補される。
Affine Degeneracy test と $k$-Sum problem に対する広く信じられている硬さ予想の削減により、このギャップを多元対数項に閉じる。
我々の還元は Affine Degeneracy test に基づく $\tildeΩ(1/\varepsilon^d)$ と $\tildeΩ(1/\varepsilon^{d/2})$ と $k$-Sum で条件付けられた $\tildeΩ(1/\varepsilon^{d/2})$ の下位境界に一致する。
第1のバウンダリは、計算モデルが、多くの現代のアルゴリズムや計算パラダイムで実装され最適化された広範囲なスプレッド設定に対応するサイドドネスクエリに制限されている場合にも、無条件で保持する。
関連論文リスト
- Tight inapproximability of max-LINSAT and implications for decoded quantum interferometry [0.0]
我々は、非時間アルゴリズムが任意の定数でランダム割当比$r/q$を超えることを、Hstadの定理から直接還元することで証明する。
この閾値は、デコードされた量子干渉法を規定する半円法則の$ell/mから0$制限と一致する。
論文 参考訳(メタデータ) (2026-03-04T19:26:26Z) - Statistical Query Lower Bounds for Smoothed Agnostic Learning [42.71001191804269]
我々は,最近導入されたCKKMS24によるスムーズな学習の複雑さについて検討した。
具体的には、滑らかなモデルにおいて、ガウス分布の下で半空間を不可知的に学習することに焦点を当てる。
論文 参考訳(メタデータ) (2026-02-24T18:46:46Z) - Learning with Norm Constrained, Over-parameterized, Two-layer Neural Networks [54.177130905659155]
近年の研究では、再生カーネルヒルベルト空間(RKHS)がニューラルネットワークによる関数のモデル化に適した空間ではないことが示されている。
本稿では,有界ノルムを持つオーバーパラメータ化された2層ニューラルネットワークに適した関数空間について検討する。
論文 参考訳(メタデータ) (2024-04-29T15:04:07Z) - Improved Hardness Results for Learning Intersections of Halfspaces [2.1393480341554736]
不適切な設定でハーフ空間の弱学習交差点に対して、強い(そして驚くほど単純な)下界を示す。
我々は、$omega(log log N)$ halfspaces を$N$で学習しても超多項式時間を要することを示すことで、このギャップを著しく狭めている。
具体的には、次元$N$の任意の$k$ハーフスペースに対して、精度$N-Omega(k)$、指数関数的に多くのクエリが必要であることを示す。
論文 参考訳(メタデータ) (2024-02-25T05:26:35Z) - Pseudonorm Approachability and Applications to Regret Minimization [73.54127663296906]
我々は、高次元 $ell_infty$-approachability 問題を、低次元の擬ノルムアプローチ可能性問題に変換する。
我々は、$ell$や他のノルムに対するアプローチ可能性に関する以前の研究に類似した疑似ノルムアプローチ可能性のアルゴリズム理論を開発する。
論文 参考訳(メタデータ) (2023-02-03T03:19:14Z) - A Newton-CG based barrier-augmented Lagrangian method for general nonconvex conic optimization [53.044526424637866]
本稿では、2つの異なる対象の一般円錐最適化を最小化する近似二階定常点(SOSP)について検討する。
特に、近似SOSPを見つけるためのNewton-CGベースの拡張共役法を提案する。
論文 参考訳(メタデータ) (2023-01-10T20:43:29Z) - Near-Optimal Statistical Query Lower Bounds for Agnostically Learning
Intersections of Halfspaces with Gaussian Marginals [10.06689891744466]
本稿では,ガウス分布下での中間空間の学習に関するよく研究された問題について,難易度学習モデルを用いて考察する。
下界の2つの変種を証明し、それぞれがダイアコニコラスら (2021) の成分と、Boolean の設定に対する SQ 下界に対する異なる以前のアプローチ(拡張)を組み合わせた。
論文 参考訳(メタデータ) (2022-02-10T15:34:10Z) - Q-learning with Uniformly Bounded Variance: Large Discounting is Not a
Barrier to Fast Learning [7.6146285961466]
我々は、すべての$gamma 1$に対して一様に束縛されたサンプル複雑性を持つ新しいアルゴリズムのクラスを導入する。
最適化されたステップサイズシーケンスとQ-ラーニングアルゴリズムの共分散は、1/(1-ガンマ)$の二次関数であることを示す。
論文 参考訳(メタデータ) (2020-02-24T15:12:41Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。