論文の概要: Variational Bounds for Perceptron Learning from Structured Data
- arxiv url: http://arxiv.org/abs/2608.04882v1
- Date: Wed, 05 Aug 2026 14:08:08 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-08-06 14:48:43.956306
- Title: Variational Bounds for Perceptron Learning from Structured Data
- Title(参考訳): 構造データからのパーセプトロン学習のための変分境界
- Authors: Francesco Camilli, Pierluigi Contucci, Federica Gerace, Emanuele Mingione,
- Abstract要約: ガウス混合系で訓練した有限温度連続スピンパーセプトロンに変動的アプローチを導入する。
圧縮圧力に対する上限のミニマックス変動境界を導出する。
同じポテンシャルは固定点方程式を定常性として得る。
- 参考スコア(独自算出の注目度): 1.8549313085249324
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We introduce a variational approach to a finite-temperature continuous-spin perceptron trained on a Gaussian mixture. The model allows for a broad class of concave utilities and log-concave separable prior measures on the spins. By combining the interpolation method with log-concavity and concentration estimates, we derive lower and upper minimax variational bounds for the limiting quenched pressure. Remarkably, the two bounds differ only in the order of optimization of two variational parameters, while all remaining extrema are controlled by the concave--convex structure of the variational potential. Whenever the two optimizations commute, the two bounds match and identify the solution of the model. The same potential yields the fixed-point equations as stationarity conditions and provides a unified route to the computation of the ground-state energy, training loss, and generalization error.
- Abstract(参考訳): ガウス混合系で訓練した有限温度連続スピンパーセプトロンに変動的アプローチを導入する。
このモデルでは、広い種類の凹凸ユーティリティと、スピンに対する分離可能な事前測度が可能である。
補間法を対数共振器および濃度推定と組み合わせることで, 限界クエンチ圧力に対する下限と上限のミニマックス変動境界を導出する。
注目すべきことに、2つの境界は2つの変分パラメータの最適化順序でのみ異なるが、残りのエクストリームは全て変分ポテンシャルの凹凸構造によって制御される。
2つの最適化が通勤するたびに、2つの境界は一致し、モデルの解を識別する。
同じポテンシャルは固定点方程式を定常条件として生成し、基底状態エネルギー、トレーニング損失、一般化誤差の計算への統一的な経路を提供する。
関連論文リスト
- Residual-Based Time Discretization on Nonlinear Approximation Manifolds: Analysis and Gaussian Applications [0.0]
ヒルベルト空間における進化方程式の時間離散パラメトリック近似を残留最小化に基づいて検討する。
離散化と進化方程式のパラメトリゼーション、パラメータ力学を規定するディラック-フランケル変分原理の離散化である。
論文 参考訳(メタデータ) (2026-07-16T14:57:44Z) - Constrained Diffusion Models with Primal-Dual Inference [76.64466170898369]
我々はPDI(primal-Dual Inference)を用いた制約付き拡散モデルを開発する。
PDIは最適原始分布とそのパラメトリゼーション双対変数を推定する。
我々は、ガウシアン、無線リソースアロケーション、ポートフォリオ管理の混合による制約サンプリングに基づくPDIを評価する。
論文 参考訳(メタデータ) (2026-06-15T18:32:33Z) - Stability and Generalization of Push-Sum Based Decentralized Optimization over Directed Graphs [55.77845440440496]
プッシュベースの分散通信は、情報交換が非対称である可能性のある通信ネットワークの最適化を可能にする。
我々は、グラディエント・プッシュ(SGP)アルゴリズムのための統一的な一様安定性フレームワークを開発する。
重要な技術的要素は、2つの量に束縛された不均衡認識の一般化である。
論文 参考訳(メタデータ) (2026-02-24T05:32:03Z) - Variational Entropic Optimal Transport [67.76725267984578]
本稿では,ドメイン翻訳問題に対する変分エントロピー最適輸送(VarEOT)を提案する。
VarEOTは、補助正の正規化子上のトラクタブルな一般化として、log-partition $log mathbbE[exp(cdot)$の正確な変分再構成に基づいている。
合成データと画像と画像の変換に関する実験は、競争力のあるか、あるいはより良い翻訳品質を示す。
論文 参考訳(メタデータ) (2026-02-02T15:48:44Z) - Analysis of Hessian Scaling for Local and Global Costs in Variational Quantum Algorithm [0.42970700836450487]
変分量子アルゴリズムにおけるヘッセンのエントリーワイズ解の定量化を行う。
ショットノイズに対してヘッセン成分を解くのに必要なサンプルの複雑さを規定する2つの異なるスケーリング機構を示す。
論文 参考訳(メタデータ) (2026-01-31T15:49:23Z) - Revisiting Zeroth-Order Optimization: Minimum-Variance Two-Point Estimators and Directionally Aligned Perturbations [57.179679246370114]
乱摂動の分布は, 摂動段差がゼロになる傾向にあるため, 推定子の分散を最小限に抑える。
以上の結果から, 一定の長さを維持するのではなく, 真の勾配に方向を合わせることが可能であることが示唆された。
論文 参考訳(メタデータ) (2025-10-22T19:06:39Z) - Neural Optimal Transport Meets Multivariate Conformal Prediction [58.43397908730771]
条件付きベクトル回帰(CVQR)のためのフレームワークを提案する。
CVQRは、ニューラルネットワークの最適輸送と量子化された最適化を組み合わせて、予測に適用する。
論文 参考訳(メタデータ) (2025-09-29T19:50:19Z) - Variational formulation based on duality to solve partial differential equations: Use of B-splines and machine learning approximants [0.0]
多くの偏微分方程式(PDE)は、正確な原始的変動構造を持っていない。
双対(ラグランジュ乗算器)場に基づく変分原理を提案した。
線形, 一次元, 過渡対流拡散方程式の二重弱形式を導出する。
論文 参考訳(メタデータ) (2024-12-02T07:53:47Z) - Robust scalable initialization for Bayesian variational inference with
multi-modal Laplace approximations [0.0]
フル共分散構造を持つ変分混合は、パラメータ数による変動パラメータによる二次的な成長に苦しむ。
本稿では,変分推論のウォームスタートに使用できる初期ガウスモデル近似を構築する方法を提案する。
論文 参考訳(メタデータ) (2023-07-12T19:30:04Z) - Neural Control Variates [71.42768823631918]
ニューラルネットワークの集合が、積分のよい近似を見つけるという課題に直面していることを示す。
理論的に最適な分散最小化損失関数を導出し、実際に安定したオンライントレーニングを行うための代替の複合損失を提案する。
具体的には、学習した光場近似が高次バウンスに十分な品質であることを示し、誤差補正を省略し、無視可能な可視バイアスのコストでノイズを劇的に低減できることを示した。
論文 参考訳(メタデータ) (2020-06-02T11:17:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。