論文の概要: Task-State Governance: A Virtual Machine for Verifiable and Recoverable GUI Agent Execution
- arxiv url: http://arxiv.org/abs/2610.20100v1
- Date: Wed, 14 Oct 2026 12:35:59 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-15 21:06:16.139834
- Title: Task-State Governance: A Virtual Machine for Verifiable and Recoverable GUI Agent Execution
- Title（参考訳）: Task-State Governance: 検証可能なGUIエージェントの実行のための仮想マシン
- Abstract要約: 計画中心のインターフェイスでは、ユーザーは手順を監督するが、ユーザーはアプリケーションの状態を変更する。
タスクを編集可能なコントラクトとして表現するインタラクションパラダイムであるタスク状態ガバナンスを導入します。
私たちはこのパラダイムをTaskVMでインスタンス化します。
- 参考スコア（独自算出の注目度）: 17.37420437726514
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Graphical user interface (GUI) agents now execute workflows across real applications, but when execution drifts, users must determine what changed, what should have remained untouched, and what can still be recovered. Plan-centric interfaces leave users supervising procedure, but users live with changes to application state. We introduce task-state governance, an interaction paradigm that represents a task as an editable contract linking desired outcomes, facts that must be preserved, and observed application state. We instantiate this paradigm in TaskVM, which projects live state into editable task controls, executes user edits as genuine interface actions, verifies outcomes through independent observation, and marks each action as reversible, compensatable, or irreversible. Across an automated contract benchmark, a controlled user study, and an open live-model exploration, the paradigm strengthened contract compliance and users' recovery control and trust, while execution outcomes were held constant. Task contracts open a design space for governable agent interfaces.
- Abstract（参考訳）: グラフィカルユーザインターフェース(GUI)エージェントが実際のアプリケーション間でワークフローを実行するようになったが、実行がドリフトすると、ユーザは何が変更され、何が変更されずに、何が回復可能かを判断しなければならない。
計画中心のインターフェースでは、ユーザーは手順を監督するが、ユーザーはアプリケーションの状態を変更する。
タスクを編集可能なコントラクトとして表現するインタラクションパラダイムであるタスク状態ガバナンスを導入します。
私たちは、このパラダイムをTaskVMでインスタンス化し、ライブ状態を編集可能なタスクコントロールに投影し、真のインターフェイスアクションとしてユーザー編集を実行し、独立した観察を通して結果を検証し、各アクションを可逆性、可逆性、あるいは不可逆性としてマークします。
自動契約ベンチマーク、制御されたユーザスタディ、オープンなライブモデル探索を通じて、このパラダイムは契約コンプライアンスを強化し、ユーザのリカバリコントロールと信頼性を高め、実行結果を一定に保った。
タスクコントラクトは、管理可能なエージェントインターフェースの設計スペースを開く。
関連論文リスト
- Proactive Robot Assistance via Event-Driven Reasoning over State Changes [11.763359229724239]
流動的なヒューマンチームワークでは、パートナーは指示を待つのではなく、観察されたアクションの結果から次の有用なステップを推測することが多い。
イベントモニタを用いて状態変化を監視し、イベント完了時に、安定化されたプレ/ポストスナップショットを抽出するイベント駆動フレームワークを提案する。
凍結事前訓練されたビジョンランゲージモデル(VLM)は、タスクコンテキストを推論し、アシストが適切かどうかを決定し、必要に応じて一連のアシストアクションを生成する。
論文 参考訳（メタデータ） (2026-10-06T13:39:46Z) - RoboBridge: A Self-Evolving Embodied Agent Framework for Sim-to-Real Transfer [54.448285795003294]
インボディード・インテリジェンスを現実世界に持ち込む上での課題は、シミュレーションから現実への能力移転だ。
本稿では,Sim-to-real転送を実行可能なタスクスキルの継続的な適応として扱うフレームワークであるRoboBridgeを提案する。
論文 参考訳（メタデータ） (2026-10-02T02:53:57Z) - The Right Lesson at the Right Step: Deriving Control Updates for Self-Evolving Agents [36.47866920853845]
自己進化型エージェントは、過去の経験(通常、グローバルなプロンプト、記憶、リフレクションなど)を再利用することで、将来の行動を改善する。
本稿では,エージェントの実行完了から再利用可能な制御プログラム更新を学習するフレームワークであるEvoCUEを紹介する。
学習慣行が適切な実行ステップに到達しなければならない長時間のツール使用環境において、EvoCUEを評価する。
論文 参考訳（メタデータ） (2026-09-28T11:59:22Z) - Agent-Integrated Software: Interaction Contracts and Continuous Assurance [14.374598285839275]
信頼性のある統合には、タスクレベルのインタラクションとアプリケーションの振る舞いを明確に対応する必要があります。
本稿では,エージェント・インテグレート・ソフトウェア(AIS)を,従来のコア,ダイレクトインタラクション,組込みエージェントを組み合わせたソフトウェアパターンとして紹介する。
この視点は、アプリケーションの抽象化、開発サポート、制御された実行、品質評価、そして人間の監督にまたがる研究課題を発展させます。
論文 参考訳（メタデータ） (2026-09-10T11:17:19Z) - JarvisGUI: Towards Cross-Device GUI Agents with Dynamic Task Composition [51.15720718264743]
プラットフォーム間の協調的なインタラクションを必要とするデバイス間通信におけるGUIエージェントの評価を行う動的ベンチマークであるJarvisGUIを紹介する。
JarvisGUIは、GUIタスクを軽量な型システムの下で入力出力変換として定式化し、複数ステップのクロスデバイス変換を自動的に構成する。
我々は、最先端のオープンソースGUIエージェントが、実際の使用に必要な状態遷移認識、クロスプラットフォームのコンテキスト推論、長期水平依存性管理に苦労していることを示します。
論文 参考訳（メタデータ） (2026-09-09T16:59:59Z) - ScrambleToolBench: Agents Search Exhaustively Even When Their Own Map Points to the Next Step [74.83535434786145]
ScrambleToolBenchは,行動推論の分離を目的とした対話型端末ベンチマークである。
このベンチマークでは、エージェントがテストとエラーのインタラクションを通じて、隠されたツールの振る舞いを明らかにする必要がある。
現状の言語モデルに対する我々の評価は、初期発見が成功しても頑健な適応にはならないことを示している。
論文 参考訳（メタデータ） (2026-08-03T15:07:46Z) - Plover: Steering GUI Agents through Plan-Centric Interaction [18.676714502805414]
Ploverは計画中心のGUI自動化システムである。
タスク計画とリプランを、永続的で、検査可能で、修正可能なアーティファクトとして外部化する。
以上の結果から,多くの自律型GUIエージェント故障は,計画の可視化と介入の局所化による構造的修復が可能であることが示唆された。
論文 参考訳（メタデータ） (2026-07-16T16:48:39Z) - VitaBench 2.0: Evaluating Personalized and Proactive Agents in Long-Term User Interactions [63.13827503828231]
我々は、長期ユーザーインタラクションにおけるパーソナライズされたプロアクティブなエージェント動作を評価するためのベンチマークであるVitaBench 2.0を紹介する。
結果は、最先端のモデルでさえ、現実世界のパーソナライゼーションは非常に困難であることを示している。
論文 参考訳（メタデータ） (2026-05-26T15:07:38Z) - DocOS: Towards Proactive Document-Guided Actions in GUI Agents [54.27655693145045]
textbfDocOSは、完全にインタラクティブな環境で文書誘導問題解決を評価するために設計されたベンチマークである。
実験の結果、エージェントはプロアクティブ検索中に関連情報を確実に見つけるのに苦労し、検索した指示を忠実に正確な行動に移すのに失敗することが判明した。
論文 参考訳（メタデータ） (2026-05-18T08:36:04Z) - KnowU-Bench: Towards Interactive, Proactive, and Personalized Mobile Agent Evaluation [72.01173512175531]
KnowU-Benchはパーソナライズされたモバイルエージェントのためのオンラインベンチマークである。
42のGUIタスク、86のパーソナライズされたタスク、64のプロアクティブタスクをカバーしている。
明示的なタスク実行に優れるエージェントは、あいまいな指示の下で50%以下に低下する。
論文 参考訳（メタデータ） (2026-04-09T16:50:50Z) - Event-Driven Proactive Assistive Manipulation with Grounded Vision-Language Planning [14.022917047438375]
リクエスト駆動型アシストからイベント駆動型プロアクティブアシストへの移行を紹介します。
イベントモニタとのインタラクション進捗を追跡するイベント駆動フレームワークを提案する。
我々は,実際のテーブルトップ数ブロック協調作業において,そのフレームワークを評価する。
論文 参考訳（メタデータ） (2026-03-25T05:14:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。