論文の概要: Risk-Sensitive Non-Parametric and Kernel Bandits
- arxiv url: http://arxiv.org/abs/2611.06489v1
- Date: Wed, 04 Nov 2026 13:27:07 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-11-06 03:25:58.119243
- Title: Risk-Sensitive Non-Parametric and Kernel Bandits
- Title(参考訳): リスク感性非パラメトリックおよびカーネルバンド
- Abstract要約: 我々は、期待される報酬ではなく、累積プロスペクト理論(CPT)を用いて腕を評価する非パラメトリックバンドについて検討した。
我々は,CPTに基づく意思決定から平均推定を分離する楽観的アルゴリズムであるNon-Parametric CPT Bandits(mathttNPCB$)を提案する。
我々は、未知のノイズCDFに$mathttNPCB$を拡張し、既知のCDF平均学習項を維持し、分布Eluder次元が支配するCDF学習コストを加算する。
- 参考スコア(独自算出の注目度): 10.765936017864766
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: We study non-parametric bandits in which arms are evaluated using Cumulative Prospect Theory (CPT) rather than expected reward. We consider continuous action spaces with arm-dependent noise and propose Non-Parametric CPT Bandits ($\mathtt{NPCB}$), an optimistic algorithm that decouples mean estimation from CPT-based decision-making. We prove CPT regret of order $\widetilde{\mathcal O}\bigl(\sqrt{T\,\dim_E(\mathcal F,T^{-2})\,\log N(\mathcal F,T^{-2},\|\cdot\|_\infty)}\bigr)$, where $\dim_E$ is the Eluder dimension of the function class $\mathcal F$, $T$ is the time horizon, and $N$ is its covering number in the sup norm. This matches the order-wise regret of classical non-parametric bandits, showing that CPT risk sensitivity incurs no additional order-wise regret cost. We extend $\mathtt{NPCB}$ to unknown noise CDFs, retaining the known-CDF mean-learning term and adding a CDF-learning cost governed by a distributional Eluder dimension. We also study Kernel-CPT bandits and obtain information-gain-based regret bounds for a broad range of kernels, matching the corresponding risk-neutral kernel rates up to logarithmic factors.
- Abstract(参考訳): 我々は、期待される報酬ではなく、累積プロスペクト理論(CPT)を用いて腕を評価する非パラメトリックバンドについて検討した。
我々は、腕依存雑音を伴う連続行動空間を考察し、CPTに基づく意思決定から平均推定を分離する楽観的アルゴリズムであるNon-Parametric CPT Bandits(\matht{NPCB}$)を提案する。
次数 $\widetilde{\mathcal O}\bigl(\sqrt{T\,\dim_E(\mathcal F,T^{-2})\,\log N(\mathcal F,T^{-2},\|\cdot\|_\infty)}\bigr)$, ここで $\dim_E$ は関数クラス $\mathcal F$ のエルダー次元であり、$T$ は時間軸であり、$N$ はsupノルムの被覆数である。
これは古典的な非パラメトリックな盗賊の秩序的な後悔と一致し、CPTのリスク感度が追加の秩序的な後悔コストを伴わないことを示した。
我々は、未知のノイズCDFに$\mathtt{NPCB}$を拡張し、既知のCDF平均学習項を保持し、分布Eluder次元によって管理されるCDF学習コストを加算する。
また,カーネル-CPT帯域について検討し,幅広いカーネルに対する情報ゲインに基づく後悔境界を求め,それに対応するリスクニュートラルカーネルレートを対数因子に一致させる。
関連論文リスト
- High-Probability Regret Bounds for Feel-Good Thompson Sampling [50.91983233376599]
フィールグッドトンプソンサンプリング(FGTS)は、バニラトンプソンサンプリングの後部を、高い予測最適値の報酬関数を求める探索項で強化する。
コンテクスト的包帯における累積FGTSと現在のステップFGTSの両方に対する最初の高い確率的後悔境界を導出する。
期待された信頼の保証とは対照的に、後悔を高い確率で制御するコストは加法項に制限される。
論文 参考訳(メタデータ) (2026-10-14T03:30:45Z) - Near-Optimal Regret in Adversarial Kernel Bandits [50.68324062892194]
本稿では,各ラウンドにおける損失が任意の有界要素によって誘導される逆カーネルバンドイット問題について検討する。
我々の主な結果は、$widetildeObig(sqrtT, d_*(),log|X|big)$, ここでは$d_*()$は有効次元の広く解釈された概念である。
論文 参考訳(メタデータ) (2026-05-26T06:10:24Z) - Learning to Allocate Resources with Censored Feedback [37.26445474395888]
我々は、検閲されたフィードバックの下で、B$の予算をK$の腕に割り当てなければならないオンラインリソース割り当て問題について検討する。
非自明なパラメータ推定と信頼境界を利用する楽観的なアルゴリズムであるRA-UCBを提案する。
そして、実世界のデータセットの実験を通して理論結果を検証する。
論文 参考訳(メタデータ) (2026-02-06T10:04:54Z) - Communication-Constrained Bandits under Additive Gaussian Noise [111.06688156723018]
クライアントが学習者にコミュニケーション制約のあるフィードバックを提供する分散マルチアームバンディットについて検討する。
我々は、この下限を小さな加法係数にマッチさせるマルチフェーズ帯域幅アルゴリズム、$mathtUEtext-UCB++$を提案する。
論文 参考訳(メタデータ) (2023-04-25T09:31:20Z) - Provable Robustness of Adversarial Training for Learning Halfspaces with
Noise [95.84614821570283]
ラベル雑音の存在下での敵対的ロバストなハーフスペースの特性を分析する。
我々の知る限りでは、これは敵の訓練がノイズの分類子を与えることを示す最初の研究である。
論文 参考訳(メタデータ) (2021-04-19T16:35:38Z) - Stochastic Bandits with Linear Constraints [69.757694218456]
制約付き文脈線形帯域設定について検討し、エージェントの目標は一連のポリシーを作成することである。
楽観的悲観的線形帯域(OPLB)と呼ばれる,この問題に対する高信頼束縛アルゴリズムを提案する。
論文 参考訳(メタデータ) (2020-06-17T22:32:19Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。