論文の概要: Efficiency Matters in Autonomous Research
- arxiv url: http://arxiv.org/abs/2607.24647v1
- Date: Mon, 27 Jul 2026 16:46:33 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-07-28 22:34:15.514969
- Title: Efficiency Matters in Autonomous Research
- Title(参考訳): 自律的な研究における効率性
- Abstract要約: 我々は、解探索プロセスの効率は等しく重要であるが、しばしば見過ごされる性能の次元であると主張する。
強力なARシステムは、高品質な結果をもたらすだけでなく、できるだけ小さな予算でそれに到達するべきである。
探索効率と最終的な結果の質は、それぞれ異なる性能の次元であることが示される。
- 参考スコア(独自算出の注目度): 7.013604169294101
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: AI-driven autonomous research (AR) systems are becoming increasingly effective across a broad range of tasks. Their performance, however, is still evaluated primarily by the quality of the final outcome. In this paper, we argue that the efficiency of the solution-search process is an equally important but often overlooked dimension of performance. A strong AR system should not only produce high-quality results, but also reach them with as small a budget as possible. Search efficiency will become increasingly important as AR expands from domains with inexpensive verification, such as mathematics and coding, to real-world scientific settings in which solution evaluation may require costly physical experiments. To capture this dimension, we propose evaluating AR systems using the area under the curve (AUC) of the Pareto frontier, alongside final outcome quality. We compare several families of search algorithms, including hill climbing, beam search, tree search, and evolutionary search, across twelve systems-optimization tasks. We find that no single search structure is consistently the most efficient. We also show that search efficiency and final outcome quality are distinct performance dimensions: a method that eventually achieves the best result may nevertheless improve slowly and consume substantially more evaluation budget before reaching that result. Because the most effective search policy is generally unknown in advance, we introduce an adaptive procedure called fluid search, which uses a portfolio bandit to dynamically allocate a fixed evaluation budget across a forest of search processes. Across the evaluated tasks, fluid search achieves the highest overall search efficiency, closely matching the performance of a per-task oracle that is given the best search structure for each task in advance.
- Abstract(参考訳): AI駆動の自律研究(AR)システムは、幅広いタスクでますます効果的になりつつある。
しかし、そのパフォーマンスは主に最終的な結果の品質によって評価されている。
本稿では,解探索プロセスの効率性は等しく重要であるが,しばしば見過ごされる性能の次元である,と論じる。
強力なARシステムは、高品質な結果をもたらすだけでなく、できるだけ小さな予算でそれに到達するべきである。
ARは、数学やコーディングなどの安価な検証を行うドメインから、ソリューション評価がコストのかかる物理実験を必要とする現実的な科学的設定へと拡張するにつれて、探索効率がますます重要になる。
この次元を捉えるために,パレートフロンティアの曲線(AUC)に基づくARシステムの評価と,最終的な結果の品質について述べる。
登山、梁探索、木探索、進化探索などの探索アルゴリズムを、12のシステム最適化タスクで比較した。
単一の検索構造が常に最も効率的であることに気付きました。
また、探索効率と最終的な結果の質は、最終的に最良の結果を得る手法は、その結果に達する前に、ゆっくりと改善し、はるかに多くの評価予算を消費する可能性があることを示す。
提案手法は,探索プロセスの森林にまたがる固定評価予算を動的に割り当てるポートフォリオバンドイットを用いて,流体探索という適応的な手法を導入するものである。
評価されたタスク全体では、流体探索は全探索効率が最も高く、各タスクに最適な探索構造を与えるタスク毎のオラクルの性能と密に一致している。
関連論文リスト
- AutoSearch: Adaptive Search Depth for Efficient Agentic RAG via Reinforcement Learning [52.305422887002656]
本稿では,自己生成中間回答を用いて各探索ステップを評価する強化学習フレームワークを提案する。
自己回答機構により、AutoSearchは最小限の検索深度を特定し、効率的な検索を促進する。
実験の結果、AutoSearchは検索品質を維持しながら過剰検索を軽減し、精度と効率のトレードオフが優れていることがわかった。
論文 参考訳(メタデータ) (2026-04-19T09:05:48Z) - Search More, Think Less: Rethinking Long-Horizon Agentic Search for Efficiency and Generalization [64.61432234404276]
emphSearch More, Think Less (SMTL) は、効率性と一般化の両方をターゲットとした長期エージェント検索のためのフレームワークである。
我々は、教師付き微調整と強化学習を用いてエンドツーエンドエージェントを訓練し、ベンチマーク全体にわたって、強固で頻繁なパフォーマンスを実現する。
論文 参考訳(メタデータ) (2026-02-26T06:46:41Z) - SmartSearch: Process Reward-Guided Query Refinement for Search Agents [63.46067892354375]
大言語モデル(LLM)に基づく検索エージェントは、知識集約的な問題に対処するために有望であることが証明されている。
既存の研究は主に、検索エージェントの推論パラダイムの最適化に重点を置いているが、推論中の中間的な検索クエリの品質は見過ごされ続けている。
この問題を緩和する2つの主要なメカニズムの上に構築されたフレームワークであるSmartSearchを紹介します。
論文 参考訳(メタデータ) (2026-01-08T12:39:05Z) - WebLeaper: Empowering Efficiency and Efficacy in WebAgent via Enabling Info-Rich Seeking [60.35109192765302]
情報検索は、自律的な推論と意思決定を可能にする中核的な能力である。
我々は、高カバレッジなISタスクを構築し、効率的なソリューショントラジェクトリを生成するためのフレームワークであるWebLeaperを提案する。
本手法は,強いベースラインに対する有効性と効率性の向上を継続的に達成する。
論文 参考訳(メタデータ) (2025-10-28T17:51:42Z) - HiPRAG: Hierarchical Process Rewards for Efficient Agentic Retrieval Augmented Generation [21.08814504507274]
準最適探索行動は、オーバーサーチやアンダーサーチなど、広く存在する。
現在のトレーニング方法は、通常、RLフレームワークの成果ベースの報酬に依存するが、これらの非効率に対処するために必要なきめ細かい制御が欠如している。
我々は、RLトレーニングに詳細な知識に基づくプロセス報酬を組み込んだトレーニング手法であるHiPRAGを紹介する。
論文 参考訳(メタデータ) (2025-10-09T05:13:10Z) - How Far are LLMs from Real Search? A Comprehensive Study on Efficiency, Completeness, and Inherent Capabilities [36.83416452604334]
本稿では,Large Language Models (LLMs) を有効かつ効率的な検索に活用するフレームワークとして,SeaL(Search via Learning)を提案する。
SeaLは、従来のアプローチと比較して、検索スペースを最大99.1%削減しながらほぼ完璧な精度を実現している。
解析の結果,現在のLLMは複雑な問題において効率的な探索に苦しむ一方で,体系的な探索戦略を取り入れることで,問題解決能力が著しく向上していることが明らかとなった。
論文 参考訳(メタデータ) (2025-02-25T17:30:40Z) - Hybrid Search for Efficient Planning with Completeness Guarantees [63.02803974708516]
本稿では,離散的な行動空間における完全性を実現するために,部分ゴール探索法を効果的に拡張する手法を提案する。
このソリューションは、高レベルの探索の実践的効率と低レベルの探索の完全性という、両方の世界のベストを達成している。
論文 参考訳(メタデータ) (2023-10-19T15:16:43Z) - Efficient Non-Parametric Optimizer Search for Diverse Tasks [93.64739408827604]
興味のあるタスクを直接検索できる,スケーラブルで汎用的なフレームワークを初めて提示する。
基礎となる数学表現の自然木構造に着想を得て、空間を超木に再配置する。
我々は,モンテカルロ法を木探索に適用し,レジェクションサンプリングと等価形状検出を備える。
論文 参考訳(メタデータ) (2022-09-27T17:51:31Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。