論文の概要: Teacher-Aware Evolution of Heuristic Programs from Learned Optimization Policies
- arxiv url: http://arxiv.org/abs/2605.10634v1
- Date: Mon, 11 May 2026 14:22:29 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-12 23:28:50.892091
- Title: Teacher-Aware Evolution of Heuristic Programs from Learned Optimization Policies
- Title(参考訳): 学習最適化政策によるヒューリスティックプログラムの教師意識の進化
- Authors: Minyu Chen, Song Qin, Ling-I Wu, Jianxin Xue, Guoqiang Li,
- Abstract要約: 本研究では,独立に訓練された最適化ポリシーを行動教師として活用するemph-Teacher-aware進化的フレームワークを提案する。
提案手法は,教師を配置・模倣する代わりに,候補プログラムが訪れた状態を検索し,その行動選好を進化のための局所的なフィードバックとして利用する。
- 参考スコア(独自算出の注目度): 2.979229299806738
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: LLM-based automatic heuristic design has shown promise for generating executable heuristics for combinatorial optimization, but existing methods mainly rely on delayed endpoint performance. We propose a \emph{teacher-aware evolutionary framework} that uses independently trained learned optimization policies as behavioral teachers. Instead of deploying or imitating the teacher, our method queries it on states visited by candidate heuristic programs and uses its action preferences as local feedback for evolution. The resulting search discovers static executable heuristics guided by both task performance and teacher-derived behavioral signals. Experiments on scheduling, routing, and graph optimization benchmarks show that our method improves over performance-driven LLM heuristic evolution baselines while requiring no neural inference at deployment. These results suggest that learned optimization policies can be repurposed as behavioral feedback sources for automatic heuristic discovery.
- Abstract(参考訳): LLMに基づく自動ヒューリスティック設計は、組合せ最適化のために実行可能なヒューリスティックを生成することを約束しているが、既存の手法は主に遅延エンドポイント性能に依存している。
本稿では,学習した最適化ポリシーを行動教師として独立に学習する「emph{teacher-aware evolution framework」を提案する。
提案手法は,教師を配置・模倣する代わりに,対象とするヒューリスティックプログラムが訪れた状態を検索し,その行動選好を進化のための局所的なフィードバックとして利用する。
その結果,タスク性能と教師由来の行動信号の両方によって誘導される静的な実行可能ヒューリスティックが発見された。
スケジューリング、ルーティング、グラフ最適化のベンチマーク実験により、我々の手法は、デプロイメント時に神経推論を必要とせず、性能駆動型LLMヒューリスティック進化ベースラインよりも改善できることが示されている。
これらの結果は,学習した最適化ポリシーを,自動ヒューリスティック発見のための行動フィードバック源として再利用できることを示唆している。
関連論文リスト
- Evolution of Optimization Methods: Algorithms, Scenarios, and Evaluations [98.44542103979735]
勾配勾配降下法(SGD)とアダム(Adam)による1次勾配勾配降下法は、現代の訓練パイプラインの基礎となる。
大規模モデルトレーニング、厳格なプライバシ要件、分散学習パラダイムは、プライバシ保護とメモリ効率に関する従来のアプローチにおける重要な制限を明らかにする。
深層学習最適化アルゴリズムの進化軌道を振り返って分析し、様々なモデルアーキテクチャやトレーニングシナリオの主流を包括的に評価する。
我々は、重要な新興トレンドと基本設計のトレードオフを抽出し、将来の研究の有望な方向性を示唆する。
論文 参考訳(メタデータ) (2026-04-14T17:01:36Z) - Learning to Learn-at-Test-Time: Language Agents with Learnable Adaptation Policies [48.31565681022125]
テスト・タイム・ラーニング(TTL)は、言語エージェントが推論時に環境と繰り返し対話することで、その性能を反復的に改善することを可能にする。
我々は,人間の直感に基づく手作業ではなく,タスク環境から最適な適応ポリシーを学ぶべきだと論じている。
本稿では,2段階最適化問題として効果的な適応ポリシーの発見を定式化するMeta-TTLを提案する。
論文 参考訳(メタデータ) (2026-04-01T12:41:01Z) - Agentic Policy Optimization via Instruction-Policy Co-Evolution [44.74237684380034]
INSPOは、命令-政治共進化のための新しいフレームワークである。
強化学習ループの動的コンポーネントとして命令最適化を統合する。
実験では、INSPOは計算オーバーヘッドを極端に増加させるだけで、かなりの性能向上を達成する。
論文 参考訳(メタデータ) (2025-12-01T17:56:29Z) - Unleashing the Potential of Large Language Models as Prompt Optimizers: Analogical Analysis with Gradient-based Model Optimizers [108.72225067368592]
本稿では,大規模言語モデル(LLM)に基づくプロンプトの設計について検討する。
モデルパラメータ学習における2つの重要な要素を同定する。
グラディエントにインスパイアされた Prompt ベースの GPO を開発した。
論文 参考訳(メタデータ) (2024-02-27T15:05:32Z) - Acceleration in Policy Optimization [50.323182853069184]
我々は、楽観的かつ適応的な更新を通じて、政策改善のステップにフォレストを組み込むことにより、強化学習(RL)における政策最適化手法を加速するための統一パラダイムに向けて研究する。
我々は、楽観主義を、政策の将来行動の予測モデルとして定義し、適応性は、過度な予測や変化に対する遅延反応からエラーを軽減するために、即時かつ予測的な修正措置をとるものである。
我々は,メタグラディエント学習による適応型楽観的ポリシー勾配アルゴリズムを設計し,実証的なタスクにおいて,加速度に関連するいくつかの設計選択を実証的に強調する。
論文 参考訳(メタデータ) (2023-06-18T15:50:57Z) - A Closer Look at Learned Optimization: Stability, Robustness, and
Inductive Biases [44.01339030872185]
ブラックボックスは、しばしば、メタトレーニングセットのタスクと異なり、安定性と一般化に苦しむ。
最適化アルゴリズムの帰納バイアスと安定性特性について検討し、結果として得られる知見をブラックボックスの帰納バイアスの設計に適用する。
私たちはさまざまなニューラルネットワークトレーニングタスクを学び、そこで学んだ技術の現状を上回ります。
論文 参考訳(メタデータ) (2022-09-22T17:47:21Z) - Reverse engineering learned optimizers reveals known and novel
mechanisms [50.50540910474342]
学習は最適化問題を解決するために自らを訓練できるアルゴリズムである。
実験の結果は,学習の動作方法に関するそれまでの曖昧な理解を解明し,今後の学習を解釈するためのツールを確立するのに役立つ。
論文 参考訳(メタデータ) (2020-11-04T07:12:43Z) - Value Driven Representation for Human-in-the-Loop Reinforcement Learning [33.79501890330252]
我々は,システム設計者が,強化学習エージェントが使用する観測空間を定義するために,センサセットや特徴セットを選択する方法のアルゴリズム的基礎に焦点をあてる。
本稿では、強化学習エージェントの観測空間を反復的かつ適応的に拡張するアルゴリズム、値駆動表現(VDR)を提案する。
シミュレーションされた人間を用いた標準RLベンチマークによる手法の性能評価を行い、従来のベースラインよりも大幅に改善したことを示す。
論文 参考訳(メタデータ) (2020-04-02T18:45:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。