論文の概要: Nonlinear Bandit
- arxiv url: http://arxiv.org/abs/2607.07304v1
- Date: Wed, 08 Jul 2026 11:47:08 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-07-09 22:50:30.363446
- Title: Nonlinear Bandit
- Title(参考訳): 非線形バンド
- Authors: Tianshuo Zheng, Ting Wu, Zhi-Hua Zhou, Keqin Liu,
- Abstract要約: 重み付き雑音下での一般化線形帯域(GLB)問題について検討する。
オンラインミラー降下法(OMD)に基づいて,適応型ハマー損失法を拡張したアルゴリズムEHMを提案する。
我々は,このアルゴリズムが$widetildemathcalO(Tfrac11+)$をほぼ最適に残すことを示す。
- 参考スコア(独自算出の注目度): 43.43877548287221
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: In this paper we first study the problem of generalized linear bandit (GLB) under heavy-tailed noise. The characteristics of heavy-tailed distributions are widely observed in real-world applications such as personalized recommendation, financial markets, and medical treatments. Based on the online mirror descent (OMD) method, we propose an algorithm EHM that extends the adaptive Huber loss method (Wang et al., 2025) with one-pass update ($\mathcal{O}(1)$ computational complexity with respect to current round $t$ and the time horizon $T$), which simultaneously achieves an almost optimal regret of $\widetilde{\mathcal{O}}(T^{\frac{1}{1+ε}})$ where $T$ is the time horizon. In addition, by utilizing a special property of some link function (Sawarni et al., 2025), our algorithm eliminates the need to know a commonly used parameter. Next, we study the GLB problem under the case when contextual characteristic becomes piecewise constant, and we slightly revised former algorithm to obtain the PGLB-EHM algorithm. After theoretical analysis, we prove that the regret upper bound order stays the same. Furthermore, we look deeper into a special case of nonlinear bandit (NB) and present the NB-EHM algorithm with bisection method and special restriction. Eventually we utilize the affine lifting approach and show that the general NB problem can be applied with NB-EHM to achieve a sublinear regret bound.
- Abstract(参考訳): 本稿では,重み付き雑音下での一般化線形帯域(GLB)問題について検討する。
ヘビーテール分布の特徴は、パーソナライズされたレコメンデーション、金融市場、医療治療といった現実世界の応用において広く見られる。
オンラインミラー降下法 (OMD) に基づいて, 適応的ハマー損失法 (Wang et al , 2025) を1パス更新 (\mathcal{O}(1)$) で拡張するアルゴリズム EHM を提案する。
さらに,あるリンク関数の特別な特性(Sawarni et al , 2025)を利用することで,このアルゴリズムは一般的に使用されるパラメータを知る必要がなくなる。
次に、文脈特性が断片的に一定になった場合のGLB問題について検討し、PGLB-EHMアルゴリズムを得るために、前者のアルゴリズムを少し修正した。
理論的解析の後、後悔の上界次数は同じであることを示す。
さらに,非線形バンドイット(NB)の特殊な場合を深く検討し,2分割法と特殊制限を用いたNB-EHMアルゴリズムを提案する。
最終的に、アフィン昇降法を用いて、NB-EHMで一般的なNB問題を適用でき、サブ線形後悔境界を達成できることを示す。
関連論文リスト
- Provably Adaptive Linear Approximation for the Shapley Value and Beyond [73.0940890296463]
基本的で長期にわたる課題は、その効率的な近似である。
一般に用いられるすべての半値に対して$P(|hatboldsymbol-boldsymbol|_2geq)leq$を必要とする線形空間アルゴリズムを開発する。
本アルゴリズムは,各ユーティリティ関数の平均二乗誤差の明示的最小化を可能にする。
論文 参考訳(メタデータ) (2026-04-09T16:38:14Z) - Regularized Online RLHF with Generalized Bilinear Preferences [68.44113000390544]
一般的な嗜好を伴う文脈的オンラインRLHFの問題を考える。
一般化された双線形選好モデルを用いて、低ランクなスキュー対称行列による選好を捉える。
グリーディポリシーの双対ギャップは推定誤差の正方形によって有界であることを示す。
論文 参考訳(メタデータ) (2026-02-26T15:27:53Z) - Sparse Linear Bandits with Blocking Constraints [22.01704171400845]
データ・ポーア・システマにおける高次元スパース線形包帯問題について検討する。
線形モデルに対するラッソ推定器の新たなオフライン統計的保証を示す。
本稿では,最小限のコストで最適空間パラメータ$k$の知識を必要としない相関に基づくメタアルゴリズムを提案する。
論文 参考訳(メタデータ) (2024-10-26T01:42:03Z) - Indexed Minimum Empirical Divergence-Based Algorithms for Linear Bandits [55.938644481736446]
Indexed Minimum Empirical Divergence (IMED)は、マルチアームバンディット問題に対する非常に効果的なアプローチである。
UCBベースのアルゴリズムとトンプソンサンプリングを実証的に上回ることが観察されている。
我々は、LinIMEDアルゴリズムのファミリーと呼ぶIMEDアルゴリズムの新しい線形バージョンを提案する。
論文 参考訳(メタデータ) (2024-05-24T04:11:58Z) - Variance-Dependent Regret Bounds for Linear Bandits and Reinforcement
Learning: Adaptivity and Computational Efficiency [90.40062452292091]
本稿では,不整合雑音を持つ線形帯域に対する計算効率のよい最初のアルゴリズムを提案する。
我々のアルゴリズムは未知のノイズの分散に適応し、$tildeO(d sqrtsum_k = 1K sigma_k2 + d)$ regretを達成する。
また、強化学習において、線形混合マルコフ決定過程(MDP)に対する分散適応アルゴリズムを提案する。
論文 参考訳(メタデータ) (2023-02-21T00:17:24Z) - Exploration in Linear Bandits with Rich Action Sets and its Implications
for Inference [23.364534479492715]
期待行列の最小固有値は、アルゴリズムの累積後悔が$sqrtn)$であるときに、$Omega(sqrtn)として増加することを示す。
本研究は, 線形帯域におけるEmphmodel selectionとEmphclusteringの2つの実践シナリオに適用する。
論文 参考訳(メタデータ) (2022-07-23T20:25:07Z) - Regret Bounds for Generalized Linear Bandits under Parameter Drift [10.858333811448096]
一般化線形帯域(GLB)は、線形帯域(LB)設定の強力な拡張である。
GLBsの致命的な特徴に対処し、結果に欠陥を与える新しいアルゴリズムを紹介します。
論文 参考訳(メタデータ) (2021-03-09T22:51:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。