論文の概要: Pairwise Ranking with Gaussian Kernels
- arxiv url: http://arxiv.org/abs/2304.03185v1
- Date: Thu, 6 Apr 2023 16:10:14 GMT
- ステータス: 処理完了
- システム内更新日: 2023-04-07 13:32:26.665885
- Title: Pairwise Ranking with Gaussian Kernels
- Title(参考訳): ガウスカーネルによるペアワイズランキング
- Authors: Guanhang Lei and Lei Shi
- Abstract要約: 入力領域上のボックスカウント次元の仮定に基づいてガウスランク推定器の高速学習率を導出する。
我々の理論解析は既存の推定値を改善し、入力空間の内在次元が低いことが、次元の呪いを回避できることを示す。
- 参考スコア(独自算出の注目度): 2.4444287331956898
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Regularized pairwise ranking with Gaussian kernels is one of the cutting-edge
learning algorithms. Despite a wide range of applications, a rigorous
theoretical demonstration still lacks to support the performance of such
ranking estimators. This work aims to fill this gap by developing novel oracle
inequalities for regularized pairwise ranking. With the help of these oracle
inequalities, we derive fast learning rates of Gaussian ranking estimators
under a general box-counting dimension assumption on the input domain combined
with the noise conditions or the standard smoothness condition. Our theoretical
analysis improves the existing estimates and shows that a low intrinsic
dimension of input space can help the rates circumvent the curse of
dimensionality.
- Abstract(参考訳): 正規化されたペアワイズランキングは最先端学習アルゴリズムの1つである。
幅広い応用があるにもかかわらず、厳密な理論実証は依然としてそのようなランキング推定器のパフォーマンスを支えていない。
この研究は、正規化されたペアワイズランキングのための新しいオラクルの不等式を開発することで、このギャップを埋めることを目的としている。
これらのオラクルの不等式の助けを借りて、入力領域上の一般的なボックスカウント次元の仮定の下でガウス階数推定器の高速学習率をノイズ条件や標準滑らか性条件と組み合わせて導出する。
我々の理論解析は既存の推定値を改善し、入力空間の固有次元が低ければ次元の呪いを回避できることを示した。
関連論文リスト
- Nesterov acceleration in benignly non-convex landscapes [0.0]
本研究では, モーメントに基づく最適化アルゴリズムが, 深層学習問題の非凸設定に応用可能であることを示す。
本稿では、加速理論と実践設定のこのギャップを部分的に埋める。
論文 参考訳(メタデータ) (2024-10-10T22:02:10Z) - Weakly Convex Regularisers for Inverse Problems: Convergence of Critical Points and Primal-Dual Optimisation [12.455342327482223]
臨界点の観点から収束正則化の一般化された定式化を提案する。
これは弱凸正規化器のクラスによって達成されることを示す。
この理論を正規化学習に適用し、入力の弱い凸ニューラルネットワークに対する普遍的な近似を証明した。
論文 参考訳(メタデータ) (2024-02-01T22:54:45Z) - Distributed Markov Chain Monte Carlo Sampling based on the Alternating
Direction Method of Multipliers [143.6249073384419]
本論文では,乗算器の交互方向法に基づく分散サンプリング手法を提案する。
我々は,アルゴリズムの収束に関する理論的保証と,その最先端性に関する実験的証拠の両方を提供する。
シミュレーションでは,線形回帰タスクとロジスティック回帰タスクにアルゴリズムを配置し,その高速収束を既存の勾配法と比較した。
論文 参考訳(メタデータ) (2024-01-29T02:08:40Z) - Fine-grained analysis of non-parametric estimation for pairwise learning [9.676007573960383]
ペアワイズ学習における非パラメトリック推定の一般化性能について検討する。
我々の結果は、ランキング、AUC、ペアワイズ回帰、メートル法、類似性学習など、幅広いペアワイズ学習問題に対処するために利用できる。
論文 参考訳(メタデータ) (2023-05-31T08:13:14Z) - Iterative regularization in classification via hinge loss diagonal descent [12.684351703991965]
反復正規化(英: Iterative regularization)は、最近機械学習で人気になった正規化理論における古典的な考え方である。
本稿では,分類の文脈における反復正則化に着目した。
論文 参考訳(メタデータ) (2022-12-24T07:15:26Z) - First-Order Algorithms for Nonlinear Generalized Nash Equilibrium
Problems [88.58409977434269]
非線形一般化ナッシュ均衡問題(NGNEP)における平衡計算の問題を考える。
我々の貢献は、2次ペナルティ法と拡張ラグランジアン法に基づく2つの単純な一階アルゴリズムフレームワークを提供することである。
これらのアルゴリズムに対する漸近的理論的保証を提供する。
論文 参考訳(メタデータ) (2022-04-07T00:11:05Z) - Optimal variance-reduced stochastic approximation in Banach spaces [114.8734960258221]
可分バナッハ空間上で定義された収縮作用素の定点を推定する問題について検討する。
演算子欠陥と推定誤差の両方に対して漸近的でない境界を確立する。
論文 参考訳(メタデータ) (2022-01-21T02:46:57Z) - Heavy-tailed denoising score matching [5.371337604556311]
ランゲヴィン力学における複数のノイズレベルを連続的に初期化する反復的雑音スケーリングアルゴリズムを開発した。
実用面では、重み付きDSMを用いることで、スコア推定、制御可能なサンプリング収束、不均衡データセットに対するよりバランスのない非条件生成性能が改善される。
論文 参考訳(メタデータ) (2021-12-17T22:04:55Z) - Efficient Methods for Structured Nonconvex-Nonconcave Min-Max
Optimization [98.0595480384208]
定常点に収束する一般化外空間を提案する。
このアルゴリズムは一般の$p$ノルド空間だけでなく、一般の$p$次元ベクトル空間にも適用される。
論文 参考訳(メタデータ) (2020-10-31T21:35:42Z) - Fast Objective & Duality Gap Convergence for Non-Convex Strongly-Concave
Min-Max Problems with PL Condition [52.08417569774822]
本稿では,深層学習(深層AUC)により注目度が高まっている,円滑な非凹部min-max問題の解法に焦点をあてる。
論文 参考訳(メタデータ) (2020-06-12T00:32:21Z) - A General Method for Robust Learning from Batches [56.59844655107251]
本稿では,バッチから頑健な学習を行う一般的なフレームワークについて考察し,連続ドメインを含む任意の領域に対する分類と分布推定の限界について考察する。
本手法は,一括分節分類,一括分節,単調,対数凹,ガウス混合分布推定のための,最初の頑健な計算効率の学習アルゴリズムを導出する。
論文 参考訳(メタデータ) (2020-02-25T18:53:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。