論文の概要: GARL: Game-Theoretic Reinforcement Learning for Multi-Agent Strategic Prioritisation
- arxiv url: http://arxiv.org/abs/2606.05002v1
- Date: Wed, 03 Jun 2026 15:19:55 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-04 20:44:18.855793
- Title: GARL: Game-Theoretic Reinforcement Learning for Multi-Agent Strategic Prioritisation
- Title(参考訳): GARL:マルチエージェント戦略優先順位付けのためのゲーム理論強化学習
- Abstract要約: マルチエージェント戦略優先順位付けのためのGAme-theoretic Reinforcement Learningフレームワークを提案する。
我々は、GARLを紛争における問題ランキングでインスタンス化し、そこでは、法的手続きにおいて中核的な問題を優先することを目的としている。
- 参考スコア(独自算出の注目度): 18.453396876510347
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: LLM-based multi-agent systems are increasingly used for strategic decision-making tasks. In such settings, performance depends not only on individual model capabilities, but also on the policies by which agents interact and adapt. Multi-agent reinforcement learning can optimise these interaction policies, but its reward design often remains task-specific and weakly grounded in interaction structure. To address this gap, we propose GARL, a GAme-theoretic Reinforcement Learning framework for multi-agent strategic prioritisation. GARL formalises strategic prioritisation as a two-stage game: competing agents first allocate strategic resources over a shared candidate set, and a higher-level arbiter then produces the final ranking. The resulting game-theoretic utilities are converted into role-specific reinforcement signals, allowing policy optimisation to be guided by structured interaction. We instantiate GARL on issues-in-dispute ranking, where the goal is to prioritise core issues in legal proceedings. Experiments show that GARL improves ranking performance, enables small open-source LLMs to become competitive with a strong closed-source LLM under the same candidate-ranking setting, and yields gains in legal-domain competence and broader strategic decision-making. Overall, GARL demonstrates how game-theoretic interaction structure can be turned into reinforcement-learning objectives, providing a principled approach to policy optimisation in multi-agent strategic prioritisation.
- Abstract(参考訳): LLMベースのマルチエージェントシステムは、戦略的意思決定タスクにますます利用されている。
このような設定では、パフォーマンスは個々のモデル機能だけでなく、エージェントが相互作用し適応するポリシーにも依存します。
マルチエージェント強化学習はこれらの相互作用ポリシーを最適化することができるが、その報酬設計はしばしばタスク固有であり、相互作用構造に弱く根ざされている。
このギャップに対処するために,マルチエージェント戦略優先順位付けのためのGAme-theoretic Reinforcement LearningフレームワークであるGARLを提案する。
GARLは戦略的優先順位付けを2段階のゲームとして定式化している: 競合するエージェントはまず共有候補セットに戦略資源を割り当て、上位のアービターが最終ランキングを生成する。
結果として得られるゲーム理論ユーティリティはロール固有の強化信号に変換され、構造化された相互作用によってポリシー最適化が導かれる。
我々は、GARLを紛争における問題ランキングでインスタンス化し、そこでは、法的手続きにおいて中核的な問題を優先することを目的としている。
実験により、GARLはランキング性能を向上し、小規模なオープンソースLLMが、同じ候補条件下で強力なクローズドソースLLMと競合し、法的領域の能力とより広範な戦略的意思決定において利益を得ることを示す。
GARLは、ゲーム理論の相互作用構造を強化学習の目的に変換する方法を示し、マルチエージェント戦略優先順位付けにおけるポリシー最適化の原則的アプローチを提供する。
関連論文リスト
- ALSO: Adversarial Online Strategy Optimization for Social Agents [63.84788516416339]
社会シミュレーションにおけるオンライン戦略最適化のための最初のフレームワークとしてtextbfALSO (textbfAdrial ontextbfLine textbfStrategy textbfOptimization) を提案する。
ALSOは、スタティック・ペルソナとダイナミック・ストラテジー・インストラクションの組み合わせをアームとして扱う対向バンドイット問題として、マルチターンインタラクションを定式化する。
また、相互作用履歴から報酬を予測する軽量なニューラルサロゲートを導入し、サンプル効率の高い探索と継続的なオンライン適応を可能にしている。
論文 参考訳(メタデータ) (2026-05-15T09:25:15Z) - Strat-Reasoner: Reinforcing Strategic Reasoning of LLMs in Multi-Agent Games [21.17910455412377]
大規模言語モデルは、最終結果が全てのエージェントのジョイント戦略に依存するマルチエージェントゲームで苦労する。
既存の単エージェント強化学習アプローチとそのマルチエージェント拡張は、これらの課題に対処することができない。
マルチエージェントゲームにおけるLSMの戦略的推論能力を向上させる新しいRLベースのフレームワークであるStrat-Reasonerを提案する。
論文 参考訳(メタデータ) (2026-05-06T13:35:14Z) - Reinforced Strategy Optimization for Conversational Recommender Systems via Network-of-Experts [63.412646471177645]
会話レコメンダシステム(CRS)のための新しい強化戦略最適化(RSO)手法を提案する。
RSOは、戦略駆動型応答決定をマクロレベルの戦略計画とマイクロレベルの戦略適応に分解する。
実験の結果, RSOは最先端のベースラインと比較して, インタラクション性能を著しく向上することがわかった。
論文 参考訳(メタデータ) (2025-09-30T11:12:01Z) - Learning to Lead: Incentivizing Strategic Agents in the Dark [50.93875404941184]
一般化プリンシパルエージェントモデルのオンライン学習バージョンについて検討する。
この挑戦的な設定のための最初の証明可能なサンプル効率アルゴリズムを開発した。
我々は、プリンシパルの最適ポリシーを学ぶために、ほぼ最適な $tildeO(sqrtT) $ regret bound を確立する。
論文 参考訳(メタデータ) (2025-06-10T04:25:04Z) - EPO: Explicit Policy Optimization for Strategic Reasoning in LLMs via Reinforcement Learning [69.55982246413046]
戦略的推論のための明示的なポリシー最適化(EPO)を提案する。
我々は,マルチターン強化学習(RL)による戦略的推論モデルを訓練し,プロセス報酬と反復的な自己プレイを活用する。
本研究は, EPOに出現する様々な協調的推論機構と, 新規戦略の創出における有効性を明らかにするものである。
論文 参考訳(メタデータ) (2025-02-18T03:15:55Z) - From Novice to Expert: LLM Agent Policy Optimization via Step-wise Reinforcement Learning [62.54484062185869]
本稿では,エージェントの強化学習プロセスの最適化にステップワイド報酬を利用するStepAgentを紹介する。
エージェント反射とポリシー調整を容易にする暗黙の逆・逆の強化学習手法を提案する。
論文 参考訳(メタデータ) (2024-11-06T10:35:11Z) - Role Play: Learning Adaptive Role-Specific Strategies in Multi-Agent Interactions [8.96091816092671]
emphRole Play (RP) という新しいフレームワークを提案する。
RPは、政策の多様性の課題を、より管理可能な役割の多様性に変えるために役割埋め込みを採用している。
ロール埋め込み観察で共通の方針を訓練し、他のエージェントのジョイントロール埋め込みを推定するためにロール予測器を使用し、学習エージェントが割り当てられた役割に適応するのを助ける。
論文 参考訳(メタデータ) (2024-11-02T07:25:48Z) - K-Level Reasoning: Establishing Higher Order Beliefs in Large Language Models for Strategic Reasoning [76.3114831562989]
マルチエージェント環境で戦略を動的に適応させるためには、LLM(Large Language Model)エージェントが必要である。
我々は,「K-Level Reasoning with Large Language Models (K-R)」という新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2024-02-02T16:07:05Z) - Iterated Reasoning with Mutual Information in Cooperative and Byzantine
Decentralized Teaming [0.0]
我々は,政策グラディエント(PG)の下での最適化において,エージェントの方針がチームメイトの方針に準じることが,本質的に相互情報(MI)の下限を最大化することを示す。
我々の手法であるInfoPGは、創発的協調行動の学習におけるベースラインを上回り、分散協調型MARLタスクにおける最先端の課題を設定します。
論文 参考訳(メタデータ) (2022-01-20T22:54:32Z) - HAVEN: Hierarchical Cooperative Multi-Agent Reinforcement Learning with
Dual Coordination Mechanism [17.993973801986677]
多エージェント強化学習はしばしば、多数のエージェントによって引き起こされる指数関数的に大きな作用空間に悩まされる。
完全協調型マルチエージェント問題に対する階層的強化学習に基づく新しい値分解フレームワークHAVENを提案する。
論文 参考訳(メタデータ) (2021-10-14T10:43:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。