論文の概要: Deep Q-Learning Market Makers in a Multi-Agent Simulated Stock Market
- arxiv url: http://arxiv.org/abs/2112.04494v1
- Date: Wed, 8 Dec 2021 14:55:21 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-10 13:47:29.561121
- Title: Deep Q-Learning Market Makers in a Multi-Agent Simulated Stock Market
- Title(参考訳): マルチエージェントシミュレート株式市場における深層qラーニング市場
- Authors: Oscar Fern\'andez Vicente, Fernando Fern\'andez Rebollo, Francisco
Javier Garc\'ia Polo
- Abstract要約: 本稿では,エージェント・ベースの観点から,これらのマーケット・メーカーの戦略に関する研究に焦点をあてる。
模擬株式市場における知的市場マーカー作成のための強化学習(Reinforcement Learning, RL)の適用を提案する。
- 参考スコア(独自算出の注目度): 58.720142291102135
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Market makers play a key role in financial markets by providing liquidity.
They usually fill order books with buy and sell limit orders in order to
provide traders alternative price levels to operate. This paper focuses
precisely on the study of these markets makers strategies from an agent-based
perspective. In particular, we propose the application of Reinforcement
Learning (RL) for the creation of intelligent market markers in simulated stock
markets. This research analyzes how RL market maker agents behaves in
non-competitive (only one RL market maker learning at the same time) and
competitive scenarios (multiple RL market markers learning at the same time),
and how they adapt their strategies in a Sim2Real scope with interesting
results. Furthermore, it covers the application of policy transfer between
different experiments, describing the impact of competing environments on RL
agents performance. RL and deep RL techniques are proven as profitable market
maker approaches, leading to a better understanding of their behavior in stock
markets.
- Abstract(参考訳): 市場は流動性を提供することで金融市場で重要な役割を果たす。
彼らは通常、トレーダーが運営する代替価格水準を提供するために、購入と販売の制限命令を注文書に記入する。
本稿では,エージェントの観点から,これらのマーケットメーカーの戦略に関する研究に焦点をあてる。
特に,シミュレーション株式市場におけるインテリジェントマーケットマーカー作成のための強化学習(rl)の応用を提案する。
本研究は、RLマーケットメーカエージェントが非競争的(同時に1つのRLマーケットメーカが学習する)かつ競争シナリオ(複数のRLマーケットメーカが同時に学習する)でどのように振る舞うか、また、Sim2Realの範囲での戦略を興味深い結果に適応するかを分析する。
さらに、RLエージェントの性能に対する競合環境の影響を記述し、異なる実験間でのポリシー伝達の適用について述べる。
RLと深いRL技術は、利益を上げている市場メーカーのアプローチとして証明されており、株式市場における彼らの行動をよりよく理解している。
関連論文リスト
- Reinforcement Learning in Agent-Based Market Simulation: Unveiling Realistic Stylized Facts and Behavior [7.8082951131908604]
投資家や規制当局は、現実の市場における意思決定の結果を予測できる現実的な市場シミュレーターの恩恵を受けることができる。
伝統的なルールベースの市場シミュレータは、しばしば市場の参加者のダイナミックな振る舞いを正確に把握するのに不足する。
本研究では,強化学習(RL)エージェントを用いたエージェントベースシミュレーションフレームワークについて検討する。
論文 参考訳(メタデータ) (2024-03-28T19:06:50Z) - An Auction-based Marketplace for Model Trading in Federated Learning [54.79736037670377]
フェデレートラーニング(FL)は、局所的な分散データを用いたトレーニングモデルにおいて、その効果がますます認識されている。
FLはモデルのマーケットプレースであり、顧客は買い手と売り手の両方として振る舞う。
本稿では,性能向上に基づく適切な価格設定を実現するため,オークションベースのソリューションを提案する。
論文 参考訳(メタデータ) (2024-02-02T07:25:53Z) - Harnessing Deep Q-Learning for Enhanced Statistical Arbitrage in
High-Frequency Trading: A Comprehensive Exploration [0.0]
強化学習(Reinforcement Learning、RL)は、エージェントが環境と対話することで学習する機械学習の分野である。
本稿では,HFT(High-Frequency Trading)シナリオに適した統計仲裁手法におけるRLの統合について述べる。
広範なシミュレーションやバックテストを通じて、RLはトレーディング戦略の適応性を高めるだけでなく、収益性指標の改善やリスク調整されたリターンの期待も示している。
論文 参考訳(メタデータ) (2023-09-13T06:15:40Z) - IMM: An Imitative Reinforcement Learning Approach with Predictive
Representation Learning for Automatic Market Making [33.23156884634365]
強化学習技術は量的取引において顕著な成功を収めた。
既存のRLベースのマーケットメイキング手法のほとんどは、単価レベルの戦略の最適化に重点を置いている。
Imitative Market Maker (IMM) は、準最適信号に基づく専門家の知識と直接的な政策相互作用の両方を活用する新しいRLフレームワークである。
論文 参考訳(メタデータ) (2023-08-17T11:04:09Z) - Deep Reinforcement Learning Approach for Trading Automation in The Stock
Market [0.0]
本稿では,Deep Reinforcement Learning (DRL)アルゴリズムを用いて,株式市場における収益性取引を生成するモデルを提案する。
我々は、市場が課す制約を考慮して、部分的に観測されたマルコフ決定プロセス(POMDP)モデルとして取引問題を定式化する。
次に, Twin Delayed Deep Deterministic Policy Gradient (TD3) アルゴリズムを用いて, 2.68 Sharpe Ratio を未知のデータセットに報告し, 定式化した POMDP 問題を解く。
論文 参考訳(メタデータ) (2022-07-05T11:34:29Z) - FinRL-Meta: A Universe of Near-Real Market Environments for Data-Driven
Deep Reinforcement Learning in Quantitative Finance [58.77314662664463]
FinRL-Metaは、データ駆動型金融強化学習のための市場環境の宇宙を構築している。
まず、FinRL-MetaはDRLベースの戦略の設計パイプラインから財務データ処理を分離する。
第2に、FinRL-Metaは様々な取引タスクに数百の市場環境を提供している。
論文 参考訳(メタデータ) (2021-12-13T16:03:37Z) - Towards a fully RL-based Market Simulator [4.648677931378919]
本稿では,RLをベースとしたエージェントの2つのファミリーが同時に学習し,その目的を満たすための新たな金融枠組みを提案する。
これは、複雑な市場条件を再現する完全なRLベースの市場シミュレータへのステップである。
論文 参考訳(メタデータ) (2021-10-13T16:14:19Z) - OSOUM Framework for Trading Data Research [79.0383470835073]
私たちは、私たちの知る限り、最初のオープンソースのシミュレーションプラットフォームであるOpen SOUrce Market Simulator(OSOUM)を提供して、トレーディング市場、特にデータ市場を分析します。
我々は、購入に利用可能なさまざまなデータセットを所有する売り手と、購入に有効な適切なデータセットを検索する買い手という2つのタイプのエージェントからなる、特定のデータ市場モデルを記述し、実装する。
データ市場を扱うための商用フレームワークはすでに存在していますが、購入者および販売者の両方が(データ)市場に参加することの可能な振る舞いをシミュレートするための、自由で広範なエンドツーエンドの研究ツールを提供しています。
論文 参考訳(メタデータ) (2021-02-18T09:20:26Z) - A Deep Reinforcement Learning Framework for Continuous Intraday Market
Bidding [69.37299910149981]
再生可能エネルギー源統合の成功の鍵となる要素は、エネルギー貯蔵の利用である。
欧州の継続的な日内市場におけるエネルギー貯蔵の戦略的関与をモデル化するための新しい枠組みを提案する。
本アルゴリズムの分散バージョンは, サンプル効率のため, この問題を解決するために選択される。
その結果, エージェントは, ベンチマーク戦略よりも平均的収益率の高い政策に収束することが示唆された。
論文 参考訳(メタデータ) (2020-04-13T13:50:13Z) - Reinforcement-Learning based Portfolio Management with Augmented Asset
Movement Prediction States [71.54651874063865]
ポートフォリオマネジメント(PM)は、最大利益や最小リスクといった投資目標を達成することを目的としている。
本稿では,PMのための新しいステート拡張RLフレームワークであるSARLを提案する。
当社の枠組みは, 金融PMにおける2つのユニークな課題に対処することを目的としている。(1) データの異種データ -- 資産毎の収集情報は通常, 多様性, ノイズ, 不均衡(ニュース記事など), (2) 環境の不確実性 -- 金融市場は多様で非定常である。
論文 参考訳(メタデータ) (2020-02-09T08:10:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。