論文の概要: Can LLM Agents Automate Reinforcement Learning for Text-to-Speech?
- arxiv url: http://arxiv.org/abs/2610.04488v1
- Date: Sat, 03 Oct 2026 12:44:09 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-12 10:08:36.357791
- Title: Can LLM Agents Automate Reinforcement Learning for Text-to-Speech?
- Title(参考訳): LLMエージェントはテキスト音声の強化学習を自動化できるか?
- Abstract要約: 私たちは、共有ワークスペースの周りに、ヒューマンガイダンスとエージェント実行を構造化するコラボレーティブワークフローを構築します。
エージェントが何を自動化するかを測定するため、我々は公開レシピに対して段階的に軌道ステージを監査する。
以上の結果から, エージェントは不特定レシピを回収し, 改良し, 失速した場合には, 文献を調査し, LMキャリアからフローキャリアへピボットすることがわかった。
- 参考スコア(独自算出の注目度): 64.13250261774849
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Although reinforcement learning (RL) post-training repairs the localized segmental errors of zero-shot text-to-speech (TTS), arriving at a working recipe still relies on tedious manual tuning, and whether LLM agents can take over this research pipeline is unclear. We investigate this question with AgenticTTS-Forge, a collaborative workflow that structures human guidance and agentic execution around a shared workspace, applied to CosyVoice2-0.5B. To measure what the agent automates, we audit its trajectory stage by stage against the published recipe. To measure what it exploits, we score its policies with held-out observers hidden from the agent. Our results show that the agent recovers an underspecified recipe, improves it, and, when gains stall, surveys the literature unprompted and pivots from the LM carrier to the flow carrier, halving Bad cases. However, its autonomy exposes three traps across the data, proxy, and algorithm axes: the held-out set leaks through a channel the contract never reads, a self-shaped reward inflates the proxy where it is scored, and separately tuned policies do not compose additively. These findings show that the binding constraint is measurement rather than reasoning, and can inform the design of harnesses whose contracts read every channel the agent does.
- Abstract(参考訳): 強化学習(RL)は、ゼロショットテキスト音声(TTS)の局所的なセグメント誤差を補修するが、動作レシピに着くといまだに面倒な手動チューニングに依存しており、LLMエージェントがこの研究パイプラインを乗っ取ることができるかどうかは不明である。
本稿では,CosyVoice2-0.5Bに適用した,共有ワークスペース上でのヒューマンガイダンスとエージェント実行を協調的に構築するAgenticTTS-Forgeを用いて,この問題を考察する。
エージェントが何を自動化するかを測定するため、我々は公開レシピに対して段階的に軌道ステージを監査する。
エクスプロイトを計測するために、エージェントから隠されたホールドアウトオブザーバーでポリシーを採点する。
以上の結果から, エージェントは不特定レシピを回収し, 改善し, 失速した場合には, 文献を調査し, LMキャリアからフローキャリアへ転向させ, 不良事例を半減させることを示した。
しかし、その自律性はデータ、プロキシ、アルゴリズム軸の3つのトラップを露呈する:契約書が決して読まないチャネルを通じて保持されたセットがリークし、自己形報酬がプロキシが得点された場所で膨らみ、個別に調整されたポリシーが追加的に構成されない。
これらの結果から, 結合制約は推論よりも測定であり, エージェントが処理する全てのチャネルを読み取るハーネスの設計を通知できることがわかった。
関連論文リスト
- Symbolic Temporal Supervision of LLM Agents Using Contracts [1.7188280334580195]
本稿では,大規模言語モデル(LLM)エージェントのシンボリック時間監視のための契約ベースのフレームワークであるContrAgentを紹介する。
ContrAgentは、エージェントの振舞いを一連のツールコールとして捉え、それを固定されたチェック可能な述語セット上のトレースとしてフォーマル化する。
その後、有限トレース上の線形時間論理における仮定保証契約(sum-guarantee contract)を用いて必要な振る舞いを特定する。
論文 参考訳(メタデータ) (2026-09-16T05:05:35Z) - Confuse the Model, Control the Flow: Understanding and Mitigating Privacy Leakage from LLM Agents with Information Flow Control [33.97165894442089]
パーソナルAIエージェントは、ユーザのプライベートデータと通信へのアクセスがますます与えられている。
エージェントは、与えられた機密情報が特定の当事者に開示されるべきかどうかを判断しなければならない。
FLOWSEALは、エージェントのコンテキスト外のツールレベルのインターセプターを通じて機密性を強制する防衛システムである。
論文 参考訳(メタデータ) (2026-09-12T15:31:37Z) - AgentProv: Auditing Agentic LLM API Providers via Tool-use Policy Probes [38.37599802008238]
商用LLM APIは特定の基盤モデルを宣伝するが、提供されたバックボーンは静かに代用され、定量化され、あるいはラップされることがある。
既存の監査はすべて、テキスト出力チャネルからバックボーンアイデンティティを決定する。
本稿では,AgentProv(AgentProv)について紹介する。
論文 参考訳(メタデータ) (2026-08-30T08:22:12Z) - AgentSecBench: Measuring Prompt Injection, Privacy Leakage, and Tool-Use Integrity in LLM Agents [0.2864713389096699]
本稿では,AgentSecBenchを,この問題に対する正式なセキュリティフレームワークの実証的なインスタンス化として紹介する。
3つのゲーム・インストラクション・インテリジェンス・インテリジェンス・インテリジェンス・インテリジェンス・インテリジェンス・インテリジェンス・インテリジェンス・インテリジェンス(英語版)・インテリジェンス・インテリジェンス・インテリジェンス・インテリジェンス・インテリジェンス(英語版)・インテリジェンス・インテリジェンス・インテリジェンス・インテリジェンス・インテリジェンス・インテリジェンス・インテリジェンス(英語版)を定めている。
これは、承認された観察と能力に対するプロジェクションとしてのアプリケーションポリシーを表し、プロジェクションの即時アノテーションとプロジェクションの強化を区別し、敵のアドバンテージと、防衛が生成前に関連するモデル可視チャネルを閉鎖するかどうかを計測する。
論文 参考訳(メタデータ) (2026-05-25T18:53:22Z) - Semia: Auditing Agent Skills via Constraint-Guided Representation Synthesis [11.214847720120192]
エージェントスキルの静的監査ツールであるSemiaについて紹介する。
Semiaは、各スキルをDatalogファクトベースであるSDL(Skill Description Language)に引き上げる。
我々は,公共市場から13,728の現実世界のスキルを評価する。
論文 参考訳(メタデータ) (2026-05-01T00:48:47Z) - Gaming the Judge: Unfaithful Chain-of-Thought Can Undermine Agent Evaluation [76.5533899503582]
大規模言語モデル(LLM)は、エージェントのパフォーマンスを評価するために、ますます裁判官として使われている。
このパラダイムは、エージェントのチェーン・オブ・シークレット(CoT)推論が内部の推論と環境状態の両方を忠実に反映していることを暗黙的に仮定している。
我々は、操作された推論だけで、様々なWebタスクにまたがる800の軌跡に対して、最先端のVLM審査員の偽陽性率を最大90%向上させることができることを実証した。
論文 参考訳(メタデータ) (2026-01-21T06:07:43Z) - Interact-RAG: Reason and Interact with the Corpus, Beyond Black-Box Retrieval [49.85856484781787]
本稿では,ILMエージェントを検索プロセスのアクティブマニピュレータに高める新しいパラダイムであるInteract-RAGを紹介する。
我々は、ゼロショット実行と相互作用軌跡の合成を可能にする推論強化ワークフローを開発する。
6つのベンチマーク実験により、Interact-RAGは他の高度な手法よりも大幅に優れていることが示された。
論文 参考訳(メタデータ) (2025-10-31T15:48:43Z) - Get my drift? Catching LLM Task Drift with Activation Deltas [55.75645403965326]
タスクドリフトは攻撃者がデータを流出させたり、LLMの出力に影響を与えたりすることを可能にする。
そこで, 簡易線形分類器は, 分布外テストセット上で, ほぼ完全なLOC AUCでドリフトを検出することができることを示す。
このアプローチは、プロンプトインジェクション、ジェイルブレイク、悪意のある指示など、目に見えないタスクドメインに対して驚くほどうまく一般化する。
論文 参考訳(メタデータ) (2024-06-02T16:53:21Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。