論文の概要: Learning by Doing: Autonomously Compiling and Curating Agent Skills from Verified Traces
- arxiv url: http://arxiv.org/abs/2611.01386v1
- Date: Sun, 01 Nov 2026 00:47:54 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-11-04 23:36:30.471362
- Title: Learning by Doing: Autonomously Compiling and Curating Agent Skills from Verified Traces
- Title(参考訳): 実践による学習: 検証されたトレースからエージェントスキルを自律的にコンパイルし、キュレーションする
- Abstract要約: Zep Agent Skillsは、デプロイされたエージェントに手続き的メモリを提供するサービスである。
サービスは、各タスク試行を、順序付けられたイベント、結果、検証強度を備えたトレースとして記録する。
Zep Agent Skillsを$3$-bench Bank、AppWorld、EnterpriseOps-Gymで評価します。
- 参考スコア(独自算出の注目度): 0.02081368840745144
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Memory systems for production LLM agents mostly store semantic memory (facts about users and domains) or episodic memory (earlier interactions). Research systems such as Trace2Skill, WikiSkill, and SkillRevise learn procedures from agent runs, package them as Skills, and evaluate them on benchmarks. We describe Zep Agent Skills, a production service that gives deployed agents this procedural memory. The service uses only verified attempts as evidence, cites the supporting events for each field of a Skill, and governs the admission and distribution of each Skill version. The service records each task attempt as a Trace with ordered events, an outcome, and a verification strength. A compiler with separate Reflector and Curator roles turns verified Traces into versioned Skills. Scans and admission gates control which candidates become active, and verified use outcomes change the search rank of each Skill. The Agent Skills format is an open standard that Anthropic originated and donated to the Agentic AI Foundation, so any host of the format can load a compiled Skill. Agents retrieve Skills through lexical search with progressive disclosure, over an API or MCP. We evaluate Zep Agent Skills on $τ^3$-bench banking, AppWorld, and EnterpriseOps-Gym. Skills compiled from the Traces of a teacher model increase the pass rate of three weaker executor models on the same tasks, at every reasoning effort, by 4.5 to 18.8 points. Most of the gain is on the tasks that the teacher solved. On ALFWorld, Skills compiled from the runs of a small model give a gain similar to or larger than the gain that prior work reports for continuous fine-tuning, with no training.
- Abstract(参考訳): LLMエージェントのメモリシステムは、主にセマンティックメモリ(ユーザとドメインに関するもの)やエピソードメモリ(アーリーインタラクション)を格納する。
Trace2Skill、WikiSkill、SkillReviseといった研究システムはエージェントランから学習手順を学び、それらをSkillとしてパッケージ化し、ベンチマークで評価する。
Zep Agent Skillsは、デプロイされたエージェントにプロシージャメモリを提供するプロダクションサービスである。
このサービスは検証された試みのみを証拠として使用し、スキルの各分野のサポートイベントを引用し、各スキルバージョンの受け入れと配布を管理する。
サービスは、各タスク試行を、順序付けられたイベント、結果、検証強度を備えたトレースとして記録する。
別個のReflectorロールとCuratorロールを持つコンパイラは、検証済みのトレースをバージョン付きスキルに変換する。
シナリオと入場ゲートは、どの候補がアクティブになるかを制御し、検証された使用結果が各スキルの検索ランクを変化させる。
Agent Skillsフォーマットは、AnthropicがAgentic AI Foundationに作成、寄贈したオープンスタンダードであり、フォーマットのホストはコンパイルされたSkillをロードすることができる。
エージェントは、プログレッシブ開示による語彙探索を通じて、APIまたはMPPを介してスキルを検索する。
我々はZep Agent Skillsを$τ^3$-bench Bank, AppWorld, EnterpriseOps-Gymで評価する。
教師モデルのトレースからコンパイルされたスキルは、同じタスクにおいてより弱い3つの実行モデルのパス率を4.5から18.8ポイント向上させる。
利益の大部分は、教師が解決した仕事に関するものだ。
ALFWorldでは、小さなモデルの実行からコンパイルされたスキルは、トレーニングなしで、連続的な微調整のために前回の作業が報告するゲインと似ているか、それ以上のゲインを与える。
関連論文リスト
- Generative Skill Composition for LLM Agents [58.47191648555256]
LLMエージェントは複雑なタスクを解決するためのスキルの恩恵を受ける。
スキルライブラリが成長するにつれて、適切なスキル構成を選択することが中心的なボトルネックとして現れている。
本稿では,タスク条件付きスキルシーケンス予測として構造化されたスキルコンポジションをインスタンス化するSkillComposerを提案する。
論文 参考訳(メタデータ) (2026-06-30T17:53:09Z) - Playful Agentic Robot Learning [108.08954330298549]
本研究では,実演型プログラミングエージェントが,下流のタスクが到着する前に,連続的なスキル学習段階として自己指導型プレイを使用する,遊び型エージェントロボット学習について検討する。
RATは、新しい学習可能な探索タスク、ロボットコードポリシーの計画と実行、中間的な進捗の検証、失敗の診断、密集したステップレベルのフィードバックによる検索、そして成功した実行を永続的なコードスキルライブラリに蒸留することを提案する。
論文 参考訳(メタデータ) (2026-06-17T17:55:23Z) - Beyond Domains: Reusing Web Skills via Transferable Interaction Patterns [68.0603867264595]
SkillMigratorは再利用可能なWebスキルを学習し、特定の要素参照ではなくレイアウト構造にマッチしてサイト間でそれらを転送する。
WebArenaとMind2Webの両方において、成功軌道上の平均LCM-アクション数を、一致した成功速度で8-10%削減する。
論文 参考訳(メタデータ) (2026-06-16T08:04:35Z) - SkillCAT: Contrastive Assessment and Topology-Aware Skill Self-Evolution for LLM Agents [42.30624901249764]
現在のパイプラインはタスク毎の1つのトラックから学び、チェックする前に候補スキルパッチをマージし、推論前にフルスキルコーパスをロードする。
トレーニング不要のフレームワークであるSkillCATを提案し,このプロセスを3段階に分けた。
SpreadsheetBench,WikiTableQuestions,DocVQAなど,一般的なエージェントベンチマーク上でSkillCATを評価する。
論文 参考訳(メタデータ) (2026-06-11T13:12:10Z) - SkillJuror: Measuring How Agent Skill Organization Changes Runtime Behavior [23.11308948097101]
現在のベンチマークでは、スキルがどのように組織化されているのかを区別することは滅多にありません。
我々は、この区別をプログレッシブ・開示(Progressive Disclosure)を通じて研究し、簡潔なルートファイルが要求に応じてリソースを支援するためにエージェントを指示する。
本稿では,スキル記述パラダイムを評価するフレームワークであるSkillJurorを紹介する。
論文 参考訳(メタデータ) (2026-06-10T01:11:50Z) - Anything2Skill: Compiling External Knowledge into Reusable Skills for Agents [27.965275812765015]
Anything2Skillは、異種外部の知識を再利用可能な、検索可能な、エージェントの実行可能なスキルにコンパイルする分類誘導フレームワークである。
我々は、Anything2SkillとRAGを組み合わせることで、それぞれ98.85%と94.10%の成功率が得られることを示した。
論文 参考訳(メタデータ) (2026-06-08T10:24:32Z) - COLLEAGUE.SKILL: Automated AI Skill Generation via Expert Knowledge Distillation [58.84646485020439]
人為的なAIスキルを生成するための自動トレース・ツー・スキル蒸留システムを提案する。
COLLEAGUE.SKILLは、実践、メンタルモデル、意思決定のための能力トラックと、コミュニケーションスタイル、インタラクションルール、修正履歴のための有界な行動トラックの2つのトラックを持つバージョン付きのスキルパッケージを生成する。
論文 参考訳(メタデータ) (2026-05-29T12:59:08Z) - SkillGraph: Skill-Augmented Reinforcement Learning for Agents via Evolving Skill Graphs [70.1970574147839]
有向グラフのノードとして再利用可能なスキルを表現するフレームワークであるSKILLGRAPHを提案する。
SKILLGRAPHは個々のスキルだけでなく、多段階意思決定をガイドできる順序付きスキルサブグラフも取得する。
実験により,SKILLGRAPHはメモリ拡張RL法に対して最先端の性能を実現することが示された。
論文 参考訳(メタデータ) (2026-05-12T12:21:49Z) - SKILL0: In-Context Agentic Reinforcement Learning for Skill Internalization [61.37478254738943]
推論時のスキル向上は基本的に制限されている。
SKILL0は,スキル内部化のためのコンテキスト内強化学習フレームワークである。
SKILL0は標準のRLベースラインよりも大幅に改善されている。
論文 参考訳(メタデータ) (2026-04-02T17:03:05Z) - Trace2Skill: Distill Trajectory-Local Lessons into Transferable Agent Skills [21.971456179996093]
Trace2Skillは、人間の専門家がいかにスキルを作成できるかを反映するフレームワークです。
個々のトラジェクトリにシーケンシャルに反応する代わりに、Trace2Skillは並列なサブエージェント群を派遣して、さまざまな実行プールを分析する。
トラジェクトリ固有のレッスンを抽出し、階層的にそれらをインダクティブ推論を通じて統合され、コンフリクトフリーなスキルディレクトリに集約する。
論文 参考訳(メタデータ) (2026-03-26T08:26:38Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。