論文の概要: Minimax Optimal Regret for Causal Logistic Bandits with Counterfactual Fairness
- arxiv url: http://arxiv.org/abs/2610.01377v1
- Date: Thu, 01 Oct 2026 09:44:44 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-03 01:19:24.037894
- Title: Minimax Optimal Regret for Causal Logistic Bandits with Counterfactual Fairness
- Title(参考訳): 対物フェアネスを有する因果ロジスティック帯域に対するミニマックス最適レグレット
- Abstract要約: 本研究では,因果ロジスティック・バンドイットと反ファクトフェアネスの制約について検討する。
まず、カバータイプ制限がなければ、最適なフェアアクションの異なる現実的に区別不可能な環境が$(T)$期待のジョイントロスであることを示す。
我々は、あらゆる政策が期待される共同損失をもたらすこの条件を満たす最悪のケースファミリを構築する。
- 参考スコア(独自算出の注目度): 0.8984888893275712
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We study causal logistic bandits with counterfactual fairness constraints. The causal structure is given through known factual and counterfactual feature maps that share an unknown logistic reward parameter, but the learner observes only factual rewards. Consequently, the directions determining counterfactual feasibility need not be identifiable from the available feedback. The closest prior analyses either omit a coverage condition or impose a comparatively strong one, and do not establish matching lower bounds. We first show that some coverage condition is necessary: without a coverage-type restriction, factually indistinguishable environments with different optimal fair actions force $Ω(T)$ expected joint loss. Under a weaker full-rank condition on the factual covariance pooled across actions, we identify a target-specific information scale $V_\star$ that measures the difficulty of estimating rewards and counterfactual effects from factual feedback. We construct worst-case families satisfying this condition on which every policy incurs expected joint loss $Ω\left(\left[V_\star\min\{\log K,d\}\right]^{1/3}T^{2/3}\right)$. We also give an explore--then--exploit procedure tuned using $V_\star$ and an adaptive algorithm that does not require its value. Both algorithms achieve $\max\{R_T,V_T\}=\widetilde{O}\left(\left[V_\star\min\{\log K,d\}\right]^{1/3}T^{2/3}+κd/σ_0^2\right)$, where $R_T$ is regret relative to the best fair action and $V_T$ denotes the cumulative stage-wise positive violations. Thus the upper and lower bounds match in their leading dependence on $T$, $V_\star$, and $\min\{\log K,d\}$, up to logarithmic factors.
- Abstract(参考訳): 本研究では,因果ロジスティック・バンドイットと反ファクトフェアネス制約について検討する。
因果構造は、未知の対物的報酬パラメータを共有する既知の実物的特徴写像と反物的特徴写像を通して与えられるが、学習者は実物的報酬のみを観察する。
したがって、有効性を決定する方向は、利用可能なフィードバックから特定する必要はない。
最寄りの先行分析は、カバレッジ条件を省略するか、比較的強い条件を課すかのいずれかであり、一致した下界を確立しない。
まず、カバータイプ制限がなければ、最適なフェアアクションの異なる現実的に区別できない環境が$Ω(T)$期待のジョイントロスであることを示す。
行動間でプールされた事実共分散に関するより弱いフルランク条件の下では、事実フィードバックから報酬や反事実効果を推定することの難しさを計測する目標固有情報スケール$V_\star$を同定する。
すべてのポリシーが期待される合同損失を$Ω\left(\left[V_\star\min\{\log K,d\right]^{1/3}T^{2/3}\right)$とする条件を満たす最悪のケースファミリを構築する。
また、$V_\star$と、その値を必要としない適応アルゴリズムを用いて調整した探索-then-exploitプロシージャも提供する。
どちらのアルゴリズムも$\max\{R_T,V_T\}=\widetilde{O}\left(\left[V_\star\min\{\log K,d\right]^{1/3}T^{2/3}+κd/σ_0^2\right)$を達成する。
したがって、上界と下界は、対数的因子を除いて、$T$, $V_\star$, $\min\{\log K,d\}$への主要な依存度に一致する。
関連論文リスト
- Constrained Online Learning with Noisy Constraint Values [55.29259818039367]
一般的な実現可能性の下では、我々のLEDGERアルゴリズムは、期待される損失$O(sqrt T)と期待される予算違反$O(sqrtTlog(eT))を達成します。
スレーター条件、フィードバックチャネル間の独立性、絶対的制約値境界は不要である。
論文 参考訳(メタデータ) (2026-09-07T01:38:41Z) - Does 1/2-Tsallis-INF Also Work Well for Best-Arm Identification? [11.223878908981725]
1/2$-Tsallis-INFは、標準的なFTRLアルゴリズムである。
盗賊の対数的擬似回帰を達成しつつ、敵の盗賊の最小限の後悔を保ちながら達成する。
これは自然な疑問を提起する:同じアルゴリズムは、追加の探索なしに、最高の腕を確実に特定できるのか?
論文 参考訳(メタデータ) (2026-08-15T18:38:36Z) - Price of Fairness in Bandits: A Tight Minimax Characterization [9.360852329235477]
盗賊問題では、標準的な後悔を最小化するアルゴリズムが探索を償却コストとして扱い、初期の参加者は不公平な前衛の損失に晒される。
最近の研究は、一般化された$p$-meanを通じて、ラウンドごとの期待される報酬のシーケンスを評価することで、この問題に対処している。
アルゴリズムに依存しない下界$(sqrtkmax(1,q)/T)$; for $q>1$, this shows that $kq/2$ is a information-theoretically unavoidable。
論文 参考訳(メタデータ) (2026-07-15T02:58:57Z) - An Optimistic Algorithm for Online Convex Optimization with Adversarial Constraints [55.2480439325792]
逆制約を伴うオンライン凸最適化(OCO)について検討する。
本稿では,損失関数と制約関数の予測にアルゴリズムがアクセス可能な設定に着目する。
以上の結果から,現在のO(sqrtT) $ regret と $ tildeO(sqrtT) $ cumulative constraint violation の改善が期待できることがわかった。
論文 参考訳(メタデータ) (2024-12-11T03:06:42Z) - Nearly Minimax Optimal Regret for Multinomial Logistic Bandit [39.805192541498634]
本研究では,学習エージェントが文脈情報に基づいて順にアソシエーションを選択する,文脈多項ロジット(MNL)バンディット問題について検討する。
左下肢と左上肢の間には有意な差がみられ,特に最大配置サイズは有意な差がみられた。
我々は,一様報酬の下で,$tildeO(dsqrtT/K)$と一致する上限を実現する定数時間アルゴリズム OFU-MNL+を提案する。
論文 参考訳(メタデータ) (2024-05-16T06:07:31Z) - Nearly Optimal Algorithms for Contextual Dueling Bandits from Adversarial Feedback [58.66941279460248]
人からのフィードバックから学ぶことは、大言語モデル(LLM)のような生成モデルを調整する上で重要な役割を果たす
本稿では,このドメイン内のモデルについて考察する。-文脈的デュエルバンディット(contextual dueling bandits)と,正の選好ラベルを相手によって反転させることができる対向フィードバック(reversarial feedback)について考察する。
本稿では,不確実性重み付き最大推定に基づく頑健なコンテキストデュエルバンドイット(RCDB)を提案する。
論文 参考訳(メタデータ) (2024-04-16T17:59:55Z) - Horizon-free Reinforcement Learning in Adversarial Linear Mixture MDPs [72.40181882916089]
我々のアルゴリズムが $tildeObig((d+log (|mathcalS|2 |mathcalA|))sqrtKbig)$ regret with full-information feedback, where $d$ is the dimension of a known feature mapping is linearly parametrizing the unknown transition kernel of the MDP, $K$ is the number of episodes, $|mathcalS|$ and $|mathcalA|$ is the standardities of the state and action space。
論文 参考訳(メタデータ) (2023-05-15T05:37:32Z) - Towards Theoretical Understanding of Inverse Reinforcement Learning [45.3190496371625]
逆強化学習(IRL)は、専門家が示す振る舞いを正当化する報酬関数を回復するアルゴリズムの強力なファミリーである。
本稿では、生成モデルを用いた有限水平問題の場合のIRLの理論ギャップを解消する。
論文 参考訳(メタデータ) (2023-04-25T16:21:10Z) - Causal Bandits for Linear Structural Equation Models [58.2875460517691]
本稿では,因果図形モデルにおける最適な介入順序を設計する問題について検討する。
グラフの構造は知られており、ノードは$N$である。
頻繁性(UCBベース)とベイズ的設定に2つのアルゴリズムを提案する。
論文 参考訳(メタデータ) (2022-08-26T16:21:31Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。