論文の概要: Estimating means of bounded random variables by betting
- arxiv url: http://arxiv.org/abs/2010.09686v7
- Date: Thu, 25 Aug 2022 18:26:51 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-05 23:10:26.894011
- Title: Estimating means of bounded random variables by betting
- Title(参考訳): 賭けによる有界確率変数の推定手段
- Authors: Ian Waudby-Smith and Aaditya Ramdas
- Abstract要約: 本稿では、境界観測から未知の平均を推定する古典的な問題に対して、信頼区間(CI)と時間一様信頼シーケンス(CS)を導出する。
本稿では,Chernoff法を一般化し改良したものと考えられる濃度境界を導出する一般手法を提案する。
我々は、これらのアイデアを、置換せずにサンプリングに拡張する方法を示し、また、非常に研究された問題である。
- 参考スコア(独自算出の注目度): 39.98103047898974
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: This paper derives confidence intervals (CI) and time-uniform confidence
sequences (CS) for the classical problem of estimating an unknown mean from
bounded observations. We present a general approach for deriving concentration
bounds, that can be seen as a generalization and improvement of the celebrated
Chernoff method. At its heart, it is based on a class of composite nonnegative
martingales, with strong connections to testing by betting and the method of
mixtures. We show how to extend these ideas to sampling without replacement,
another heavily studied problem. In all cases, our bounds are adaptive to the
unknown variance, and empirically vastly outperform existing approaches based
on Hoeffding or empirical Bernstein inequalities and their recent
supermartingale generalizations. In short, we establish a new state-of-the-art
for four fundamental problems: CSs and CIs for bounded means, when sampling
with and without replacement.
- Abstract(参考訳): 本稿では,未知平均を有界観測から推定する古典的な問題に対して,信頼区間 (ci) と時間一様信頼列 (cs) を導出する。
本稿では,Chernoff法を一般化し改良したものと考えられる濃度境界を導出する一般手法を提案する。
心臓部は複合性非負のマーチンガレットのクラスに基づいており、ベッティングによる試験と混合物の方法との強いつながりがある。
我々はこれらのアイデアを、置換せずにサンプリングに拡張する方法を示す。
いずれの場合も、我々の境界は未知の分散に適応し、Hoeffdingあるいは経験的ベルンシュタインの不等式と最近のスーパーマーチンゲール一般化に基づく既存のアプローチを経験的にはるかに上回っている。
要するに私たちは,4つの基本的な問題 — css と cis forbounded means – に対する新たな最先端技術を確立しました。
関連論文リスト
- A Unified Theory of Stochastic Proximal Point Methods without Smoothness [52.30944052987393]
近点法はその数値的安定性と不完全なチューニングに対する頑健性からかなりの関心を集めている。
本稿では,近位点法(SPPM)の幅広いバリエーションの包括的解析について述べる。
論文 参考訳(メタデータ) (2024-05-24T21:09:19Z) - Deep Anti-Regularized Ensembles provide reliable out-of-distribution
uncertainty quantification [4.750521042508541]
深層アンサンブルは、しばしばトレーニングドメインの外で過度に信頼された見積を返す。
トレーニングデータに適合する大きな重みを持つネットワークの集合は、これらの2つの目的を満たす可能性が高いことを示す。
提案手法の理論的枠組みを導出し,提案手法を「水充填問題」とみなすことができることを示す。
論文 参考訳(メタデータ) (2023-04-08T15:25:12Z) - Model-Based Uncertainty in Value Functions [89.31922008981735]
MDP上の分布によって引き起こされる値の分散を特徴付けることに重点を置いている。
従来の作業は、いわゆる不確実性ベルマン方程式を解くことで、値よりも後方の分散を境界にしている。
我々は、解が値の真後分散に収束する新しい不確実性ベルマン方程式を提案する。
論文 参考訳(メタデータ) (2023-02-24T09:18:27Z) - On the Importance of Gradient Norm in PAC-Bayesian Bounds [92.82627080794491]
対数ソボレフ不等式の縮約性を利用する新しい一般化法を提案する。
我々は、この新たな損失段階的ノルム項が異なるニューラルネットワークに与える影響を実証的に分析する。
論文 参考訳(メタデータ) (2022-10-12T12:49:20Z) - Clipped Stochastic Methods for Variational Inequalities with
Heavy-Tailed Noise [64.85879194013407]
単調なVIPと非単調なVIPの解法における信頼度に対数的依存を持つ最初の高確率結果が証明された。
この結果は光尾の場合で最もよく知られたものと一致し,非単調な構造問題に新鮮である。
さらに,多くの実用的な定式化の勾配雑音が重く,クリッピングによりSEG/SGDAの性能が向上することを示す。
論文 参考訳(メタデータ) (2022-06-02T15:21:55Z) - From Optimality to Robustness: Dirichlet Sampling Strategies in
Stochastic Bandits [0.0]
本研究では、腕の観察を再サンプリングした経験的指標のペア比較に基づいて、ジェネリックディリクレサンプリング(DS)アルゴリズムについて検討する。
この戦略の異なる変種は、分布が有界であるときに証明可能な最適後悔保証と、半有界分布に対して軽度量子状態の対数後悔を実現することを示す。
論文 参考訳(メタデータ) (2021-11-18T14:34:21Z) - Tight Concentrations and Confidence Sequences from the Regret of
Universal Portfolio [30.750408480772027]
Jun と Orabona [COLT'19] はオンライン賭けアルゴリズムの後悔の保証を時間的一様濃度の不等式に簡単に変換する方法を示した。
ミニマックスベッティングアルゴリズムの後悔は、新しい暗黙的な経験的時間一様集中を引き起こすことを示す。
論文 参考訳(メタデータ) (2021-10-27T00:44:32Z) - Stochastic Gradient Descent-Ascent and Consensus Optimization for Smooth
Games: Convergence Analysis under Expected Co-coercivity [49.66890309455787]
本稿では,SGDA と SCO の最終的な収束保証として,期待されるコヒーレンシティ条件を導入し,その利点を説明する。
定常的なステップサイズを用いた場合、両手法の線形収束性を解の近傍に証明する。
我々の収束保証は任意のサンプリングパラダイムの下で保たれ、ミニバッチの複雑さに関する洞察を与える。
論文 参考訳(メタデータ) (2021-06-30T18:32:46Z) - Asymptotics of the Empirical Bootstrap Method Beyond Asymptotic
Normality [25.402400996745058]
実験的なブートストラップ推定器の限界分布は, 安定条件下では一定であることを示す。
本稿では,ブートストラップ法を用いて,カバレッジ保証付き信頼区間を構築するための3つの方法を提案する。
論文 参考訳(メタデータ) (2020-11-23T07:14:30Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。