論文の概要: RL4RLA: Teaching ML to Discover Randomized Linear Algebra Algorithms Through Curriculum Design and Graph-Based Search
- arxiv url: http://arxiv.org/abs/2605.18004v1
- Date: Mon, 18 May 2026 07:57:26 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-19 17:57:49.089674
- Title: RL4RLA: Teaching ML to Discover Randomized Linear Algebra Algorithms Through Curriculum Design and Graph-Based Search
- Title(参考訳): RL4RLA:カリキュラム設計とグラフ検索によるランダム化線形代数アルゴリズムの探索をMLに教える
- Authors: Jinglong Xiong, Xiaotian Liu, Ruoxin Wang, Zihang Liu, Yefan Zhou, Yujun Yan, Yaoqing Yang,
- Abstract要約: 本稿では、解釈可能なシンボリックRLAアルゴリズムの発見を自動化する一般的なRLフレームワークであるRL4RLAを提案する。
ブラックボックスアプローチとは異なり、本手法は基本線形代数プリミティブから明示的なアルゴリズムを構築し、検証可能かつ実装可能な表現を保証する。
我々はRL4RLAがスケッチ・アンド・プレコンディション・ソルバ、ランダム化カッツマーズ、ニュートン・スケッチを含む最先端の手法を再検討することを示した。
- 参考スコア(独自算出の注目度): 18.388661543349
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Randomized linear algebra (RLA) algorithms are a modern class of numerical linear algebra techniques that play an essential role in scientific computing and machine learning, with broad and growing adoption. However, their discovery remains mostly a manual process that requires deep expert knowledge and inspiration. While Reinforcement Learning (RL) offers a pathway to automation, standard approaches struggle with sparse reward landscapes and vast search spaces inherent to high-performing RLA algorithms. In this paper, we present RL4RLA, a general RL framework that automates the discovery of interpretable, symbolic RLA algorithms. Unlike black-box approaches, our method builds explicit algorithms from basic linear algebra primitives, ensuring verifiable and implementable representations. To enable efficient discovery, we introduce: (1) a numerical curriculum that progressively increments problem difficulty to encode inductive bias specific to the RLA domain; (2) Monte Carlo Graph Search, which optimizes exploration by identifying and merging equivalent partial algorithms. We demonstrate that RL4RLA rediscovers state-of-the-art methods, including sketch-and-precondition solvers, Randomized Kaczmarz, and Newton Sketch, and can be targeted to produce algorithms optimized for specific trade-offs between accuracy, speed, and stability. Code is available at https://github.com/Tim-Xiong/RL4RLA.
- Abstract(参考訳): ランダム化線形代数(ランダム化線形代数、RLA)アルゴリズムは、科学計算や機械学習において重要な役割を果たす数値線形代数技法の現代クラスであり、広く普及している。
しかし、彼らの発見は主に、専門家の深い知識とインスピレーションを必要とする手作業のプロセスである。
Reinforcement Learning (RL) は自動化の道筋を提供するが、標準的なアプローチでは、粗末な報奨風景や、高性能なRLAアルゴリズムに固有の広大な検索空間に苦戦している。
本稿では,解釈可能なシンボリックRLAアルゴリズムの発見を自動化する汎用RLフレームワークであるRL4RLAを提案する。
ブラックボックスアプローチとは異なり、本手法は基本線形代数プリミティブから明示的なアルゴリズムを構築し、検証可能かつ実装可能な表現を保証する。
効率的な探索を可能にするために,(1)RLA領域固有の帰納バイアスをエンコードする問題を段階的に増加させる数値カリキュラム,(2)等価部分アルゴリズムの同定とマージによる探索を最適化するモンテカルログラフサーチを導入する。
我々は、RL4RLAがスケッチ・アンド・プレコンディショナ、ランダム化カッツマーズ、ニュートン・スケッチを含む最先端の手法を取り入れ、精度、速度、安定性のトレードオフに最適化されたアルゴリズムを作成することを実証した。
コードはhttps://github.com/Tim-Xiong/RL4RLAで公開されている。
関連論文リスト
- Replicable Reinforcement Learning with Linear Function Approximation [21.370247743205056]
複製可能なランダム設計回帰と非中心共分散推定のための2つの効率的なアルゴリズムを導入する。
次に、これらのツールを活用して、線形マルコフ決定プロセスのための最初の証明可能なRLアルゴリズムを提供する。
我々は、我々のアルゴリズムを実験的に評価し、より一貫性のあるニューラルポリシーをいかに刺激するかを示す。
論文 参考訳(メタデータ) (2025-09-10T14:56:09Z) - Discovering Algorithms with Computational Language Processing [0.7062238472483737]
本稿では,トークンとして表現された操作列を概念化し,アルゴリズム発見を自動化するフレームワークを提案する。
これらの計算トークンは文法を用いてチェーン化され、より洗練された手続きの形成を可能にする。
我々のアンサンブルであるモンテカルロ木探索(MCTS)は、強化学習(RL)によって導かれ、トークン連鎖を探索し、新しいトークンの作成を促進する。
論文 参考訳(メタデータ) (2025-07-03T21:45:17Z) - CoLA: Exploiting Compositional Structure for Automatic and Efficient
Numerical Linear Algebra [62.37017125812101]
機械学習における大規模線形代数問題に対して, CoLA という, 単純だが汎用的なフレームワークを提案する。
線形演算子抽象と合成ディスパッチルールを組み合わせることで、CoLAはメモリと実行時の効率的な数値アルゴリズムを自動的に構築する。
偏微分方程式,ガウス過程,同変モデル構築,教師なし学習など,幅広い応用で有効性を示す。
論文 参考訳(メタデータ) (2023-09-06T14:59:38Z) - Reward-Machine-Guided, Self-Paced Reinforcement Learning [30.42334205249944]
報奨機による自己評価強化学習アルゴリズムを開発した。
提案アルゴリズムは,既存のベースラインが意味のある進歩を達成できない場合でも,最適な動作を確実に達成する。
また、カリキュラムの長さを減らし、カリキュラム生成プロセスのばらつきを最大4分の1まで減らします。
論文 参考訳(メタデータ) (2023-05-25T22:13:37Z) - Reinforcement Learning for Branch-and-Bound Optimisation using
Retrospective Trajectories [72.15369769265398]
機械学習は分岐のための有望なパラダイムとして登場した。
分岐のための単純かつ効果的なRLアプローチであるレトロ分岐を提案する。
我々は現在最先端のRL分岐アルゴリズムを3~5倍に上回り、500の制約と1000の変数を持つMILP上での最高のILメソッドの性能の20%以内である。
論文 参考訳(メタデータ) (2022-05-28T06:08:07Z) - Jump-Start Reinforcement Learning [68.82380421479675]
本稿では、オフラインデータやデモ、あるいは既存のポリシーを使ってRLポリシーを初期化するメタアルゴリズムを提案する。
特に,タスク解決に2つのポリシーを利用するアルゴリズムであるJump-Start Reinforcement Learning (JSRL)を提案する。
実験により、JSRLは既存の模倣と強化学習アルゴリズムを大幅に上回っていることを示す。
論文 参考訳(メタデータ) (2022-04-05T17:25:22Z) - Evolving Reinforcement Learning Algorithms [186.62294652057062]
メタラーニング強化学習アルゴリズムの手法を提案する。
学習アルゴリズムはドメインに依存しないため、トレーニング中に見えない新しい環境に一般化することができる。
従来の制御タスク、gridworld型タスク、atariゲームよりも優れた一般化性能を得る2つの学習アルゴリズムに注目した。
論文 参考訳(メタデータ) (2021-01-08T18:55:07Z) - Discovering Reinforcement Learning Algorithms [53.72358280495428]
強化学習アルゴリズムは、いくつかのルールの1つに従ってエージェントのパラメータを更新する。
本稿では,更新ルール全体を検出するメタラーニング手法を提案する。
これには、一連の環境と対話することで、"何を予測するか"(例えば、値関数)と"どのように学習するか"の両方が含まれている。
論文 参考訳(メタデータ) (2020-07-17T07:38:39Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。