論文の概要: Parameter-Free Interval-Dynamic Regret under Heavy-Tailed Noise
- arxiv url: http://arxiv.org/abs/2610.02258v1
- Date: Wed, 30 Sep 2026 21:03:03 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-06 19:20:54.740124
- Title: Parameter-Free Interval-Dynamic Regret under Heavy-Tailed Noise
- Title(参考訳): 重音下におけるパラメータフリー区間動的レグレット
- Abstract要約: オンライン凸最適化を1ラウンドに1つの偏りのない下位段階と、未知の有限条件の雑音モーメントであるp$th, $1ple2$で検討する。
長さ$n$の固定区間$I$に対して、学習者は最適な全水平静的レートを含む1+log(T/n)$を達成する。
- 参考スコア(独自算出の注目度): 55.29259818039367
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We study online convex optimization with one unbiased stochastic subgradient per round and an unknown finite conditional $p$th noise moment, $1<p\le2$. For every fixed interval $I$ of length $n$ and comparator path with $Λ_I=1+P_I/D$, one learner achieves \[ E[Regret_I(u)]\le\min(GDn, C[GD\sqrt{n(Λ_I+\log^2(2T))} +σDn^{1/p}(Λ_I+\log^2(2T))^{(p-1)/p}]). \] The learner uses none of $G,σ,p,I,P_I$, and the constant is universal. Interval adaptation adds to comparator complexity, preserving the distinct mean-gradient and noise exponents. The analysis controls calibration in expectation and limits the cost of observation-scale changes. Its general theorem compares to distributions over predictably available experts with relative-entropy dependence on a nonuniform prior. A common prior favors long windows and long restart lengths. With the statistics supplied, the interval cost becomes $1+\log(T/n)$, including the optimal full-horizon static rate. A change-of-measure lower bound identifies the noise power of this logarithm for learners retaining a full-horizon optimal guarantee, under explicit conditions. Static comparisons and deterministic partitions follow from the same decisions.
- Abstract(参考訳): オンライン凸最適化を1ラウンドあたりの偏りのない確率的下位段階と未知の有限条件付き雑音モーメント,1<p\le2$で検討する。
長さ$n$ のすべての固定区間 $I$ と、$a_I=1+P_I/D$ のコンパレータパスに対して、ある学習者は \[E[Regret_I(u)]\le\min(GDn, C[GD\sqrt{n(i_I+\log^2(2T))} +σDn^{1/p}(i_I+\log^2(2T))^{(p-1)/p}] を得る。
\]学習者は$G,σ,p,I,P_I$を一切使用せず、定数は普遍的である。
インターバル適応はコンパレータの複雑さを増し、異なる平均勾配と雑音指数を保存する。
この分析は、期待値のキャリブレーションを制御し、観測スケールの変更のコストを制限する。
その一般定理は、非一様前の相対エントロピー依存を持つ予測可能な専門家の分布と比較する。
一般的な前者は、長い窓と長い再起動期間が好まれる。
統計が供給されると、インターバルコストは1+\log(T/n)$となり、最適なフルホライゾンの静的レートを含む。
測定値の下限の変更は、明示的な条件下で、完全水平の最適保証を保持する学習者に対して、この対数の雑音パワーを特定する。
静的比較と決定論的分割は同じ決定から従う。
関連論文リスト
- Optimal single-copy estimation of quantum state moments: why $\operatorname{Tr}(ρ^3)$ and $\operatorname{Tr}(ρ^4)$ are equally hard [1.3966195782297455]
未知状態の非線形特性を限定的な実験的アクセシビリティで推定することは、量子学習の基本的な問題である。
状態モーメントを$operatornameTr(t)$で推定し、任意の適応的な単一コピー計測を可能にする。
論文 参考訳(メタデータ) (2026-09-29T15:16:45Z) - The Exact Time-Uniform Rate Frontier for Stochastic Gradient Descent on Smooth Convex Objectives [26.189892200366895]
本研究では、非拘束な滑らかな凸対象に対する標準降下勾配(SGD)の原繰り返しの時間一様収束について検討する。
標準的な雑音仮定の下では、時間一様収束速度が$sqrtlog n / n$に任意に近づくが、それに到達することはないことを証明している。
論文 参考訳(メタデータ) (2026-09-08T10:24:19Z) - Constrained Online Learning with Noisy Constraint Values [55.29259818039367]
一般的な実現可能性の下では、我々のLEDGERアルゴリズムは、期待される損失$O(sqrt T)と期待される予算違反$O(sqrtTlog(eT))を達成します。
スレーター条件、フィードバックチャネル間の独立性、絶対的制約値境界は不要である。
論文 参考訳(メタデータ) (2026-09-07T01:38:41Z) - Asymptotic-Preserving A Posteriori Analysis of Diffusion and Flow-Matching Samplers [0.6768558752130311]
拡散及びフローマッチングサンプリングは、学習した確率フローODEを、大きなノイズスケールから小さな終端フロア($_min$)まで統合し、スコアが硬く、フローが境界層を発達させる。
特異摂動パラメータとして$_min$を扱い、どの固定ステップサンプリングが解けるかを決定する。
論文 参考訳(メタデータ) (2026-07-05T04:48:33Z) - Mirror Descent Algorithms with Nearly Dimension-Independent Rates for
Differentially-Private Stochastic Saddle-Point Problems [6.431793114484429]
多面体設定における微分プライベートなサドル点の問題を解くために、$sqrtlog(d)/sqrtn + log(d)/[nvarepsilon]2/5$を提案する。
我々のアルゴリズムは、一定の成功率で$sqrtlog(d)/sqrtn + log(d)/[nvarepsilon]2/5$に達することを示す。
論文 参考訳(メタデータ) (2024-03-05T12:28:00Z) - On the $O(\frac{\sqrt{d}}{T^{1/4}})$ Convergence Rate of RMSProp and Its Momentum Extension Measured by $\ell_1$ Norm [54.28350823319057]
本稿では、RMSPropとその運動量拡張を考察し、$frac1Tsum_k=1Tの収束速度を確立する。
我々の収束率は、次元$d$を除くすべての係数に関して下界と一致する。
収束率は$frac1Tsum_k=1Tと類似していると考えられる。
論文 参考訳(メタデータ) (2024-02-01T07:21:32Z) - Asymptotically Optimal Pure Exploration for Infinite-Armed Bandits [4.811176167998627]
我々は、未知の分布から生じる無限に多くのバンドイットアームを用いて純粋探索を研究する。
私たちのゴールは、平均的な報酬が1-delta$の1つの高品質なアームを、最高の$eta$-fraction of armsの1つとして$varepsilon$内で効率的に選択することにあります。
論文 参考訳(メタデータ) (2023-06-03T04:00:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。