論文の概要: Automating the Application of HCI Principles: Skills for On-Demand UI Construction, the Human-AI Space to Think, and the Future of HCI
- arxiv url: http://arxiv.org/abs/2610.02369v1
- Date: Thu, 01 Oct 2026 18:45:43 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-06 00:14:30.049748
- Title: Automating the Application of HCI Principles: Skills for On-Demand UI Construction, the Human-AI Space to Think, and the Future of HCI
- Title（参考訳）: HCI原則の適用を自動化する - オン・デマンドUI構築のスキル、考える人間とAI空間、そしてHCIの将来
- Abstract要約: 大規模言語モデルでは、自然言語タスク記述の要求に応じて、関数型ユーザインターフェース(UI)を生成することができる。
次のステップは、単に生成されたインターフェイスから、適切に生成されたインターフェイスに移行することです。
本稿では,ユーザと人工知能(AI)の対話が思考空間となる枠組みを提案する。
- 参考スコア（独自算出の注目度）: 1.9504656495026655
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Human-computer interaction (HCI) is in the middle of a transition: large language models can now generate functional user interfaces (UIs) on demand from natural-language task descriptions. A user explains what they are trying to accomplish, and the system materializes a working interface to support it. This capability already exists in systems such as Claude and ChatGPT and continues to grow in fidelity as the underlying models improve. The next step along this trajectory is to move from interfaces that are merely generated to interfaces that are generated well. We propose a framework in which the dialogue between user and artificial intelligence (AI) becomes a Space to Think: a shared, structured cognitive workspace in which task decomposition produces an on-demand user interface as an extension of the user's thinking rather than as a separate artifact. Within this paradigm, classical HCI design knowledge (Nielsen's heuristics, Norman's affordance prescriptions, Web Content Accessibility Guidelines (WCAG) success criteria, cognitive-load constraints, and mixed-initiative principles) is encoded as skills: machine-readable skill.md files that the generating agent loads at runtime as software engineering tools. Skills turn HCI design knowledge into declarative, inspectable, version-controlled, and editable artifacts owned by the HCI community itself so that accessibility, learnability, and consistency become properties of a generative process rather than properties of a finished product. We outline a research agenda depicting a future where the HCI field transitions from today's design and knowledge heuristic checklist towards a future where the craft becomes machine-readable, executable, and open.
- Abstract（参考訳）: 大規模な言語モデルでは、自然言語によるタスク記述の要求に応じて、関数型ユーザインターフェース(UI)を生成できるようになった。
ユーザが達成しようとしていることを説明すれば、システムはそれをサポートするためのワーキングインターフェースを具体化する。
この機能は、ClaudeやChatGPTのようなシステムにはすでに存在し、基礎となるモデルが改善されるにつれて、忠実に成長を続けている。
この軌道に沿った次のステップは、単に生成されたインターフェイスから、適切に生成されたインターフェイスに移行することである。
本稿では,ユーザと人工知能(AI)の対話が思考空間となる枠組みを提案する。タスクの分解が,別の人工物としてではなく,ユーザの思考の拡張として,オンデマンドのユーザインターフェースを生成する,共有型構造化された認知ワークスペースである。
このパラダイムの中では、古典的なHCI設計知識(ニールセンのヒューリスティックス、ノーマンの余裕の処方、Webコンテンツアクセシビリティガイドライン(WCAG)の成功基準、認知負荷の制約、および混合開始原理)がスキルとしてエンコードされる。
スキルは、HCI設計の知識を宣言的、検査可能、バージョン管理可能、編集可能なアーティファクトに変換することで、アクセシビリティ、学習可能性、一貫性が完成品の特性ではなく、生成プロセスの特性となる。
我々は、HCI分野が今日の設計と知識のヒューリスティックチェックリストから、クラフトが機械可読性、実行可能、オープンになる未来へと移行する未来を描いている研究課題を概説する。
関連論文リスト
- Thinking Outside the [Chat]Box: Bridging Computer Science and Industrial Design for Cognitive-Inclusive Generative AI [0.0]
現在のGenerative AI(GenAI)インターフェースは、チャットボックスのインタラクションに大きく制約されている。
認知的アクセシビリティのための代替相互作用モデルを検討するために,我々は学際的共同設計挑戦を行った。
論文 参考訳（メタデータ） (2026-06-12T09:41:30Z) - From Human Interfaces to Agent Interfaces: Rethinking Software Design in the Age of AI-Native Systems [14.556676500506484]
ソフトウェア工学は、ヒューマン指向のインタフェースからエージェント指向の呼び出しシステムへパラダイムシフトしている、と我々は主張する。
AI指向ソフトウェアの基本ビルディングブロックとして、イボケータブルな機能を導入します。
この論文は、AIネイティブなソフトウェア設計の新たなパラダイムのための概念的基盤を提供することを目的としている。
論文 参考訳（メタデータ） (2026-03-19T07:54:58Z) - AgentOS: From Application Silos to a Natural Language-Driven Data Ecosystem [39.8098595660156]
本稿では,AgentOS(Personal Agent Operating System)の新たなパラダイムを提案する。
AgentOSでは、従来のGUIデスクトップは、統一された自然言語や音声ポータルを中心としたNUI(Natural User Interface)に置き換えられている。
システムコアは、ユーザの意図を解釈し、タスクを分解し、複数のエージェントをコーディネートするエージェントカーネルとなる。
論文 参考訳（メタデータ） (2026-03-09T21:13:52Z) - Computer-Use Agents as Judges for Generative User Interface [142.75272102498806]
ComputerUse Agents (CUA) は、グラフィカルユーザインタフェース (GUI) を通じてデジタル環境を自律的に操作する能力が高まっている。
ほとんどのGUIは、人間が効率的にタスクを実行するのに不要な人間指向の動作を採用するために設計されている。
CUA は Coder でGUI の自動設計を支援することができるだろうか?
論文 参考訳（メタデータ） (2025-11-19T16:00:02Z) - Generative Interfaces for Language Models [70.25765232527762]
ユーザインタフェース(UI)を積極的に生成することにより,大規模言語モデル(LLM)がユーザクエリに応答するパラダイムを提案する。
本フレームワークは,ユーザクエリをタスク固有のUIに変換するために,構造化インターフェース固有の表現と反復的洗練を活用している。
その結果、生成的インタフェースは人間の嗜好を最大72%改善し、会話的インタフェースよりも一貫して優れていた。
論文 参考訳（メタデータ） (2025-08-26T17:43:20Z) - Capability-Driven Skill Generation with LLMs: A RAG-Based Approach for Reusing Existing Libraries and Interfaces [40.638726615548954]
本稿では,スキル実装のコントラクトとして機能を扱うとともに,大規模言語モデルを用いて自然言語ユーザ入力に基づくコード生成を行う手法を提案する。
このアプローチの重要な特徴は、既存のソフトウェアライブラリとインターフェース技術の統合です。
コード生成プロセスに独自のライブラリやリソースインターフェースを組み込むことができるフレームワークを導入する。
論文 参考訳（メタデータ） (2025-05-06T08:27:04Z) - GUI Agents: A Survey [159.7656453000263]
グラフィカルユーザインタフェース(GUI)エージェントは、人間とコンピュータのインタラクションを自動化するためのトランスフォーメーションアプローチとして登場した。
GUIエージェントの関心の高まりと基本的な重要性により、ベンチマーク、評価指標、アーキテクチャ、トレーニングメソッドを分類する総合的な調査を提供する。
論文 参考訳（メタデータ） (2024-12-18T04:48:28Z) - Aguvis: Unified Pure Vision Agents for Autonomous GUI Interaction [69.57190742976091]
Aguvisは、自律的なGUIエージェントのためのビジョンベースのフレームワークである。
クロスプラットフォームのインタラクションを標準化し、内部モノローグによる構造化推論を取り入れている。
オフラインおよび実世界のオンラインベンチマークで最先端のパフォーマンスを達成する。
論文 参考訳（メタデータ） (2024-12-05T18:58:26Z) - SWE-agent: Agent-Computer Interfaces Enable Automated Software Engineering [79.07755560048388]
SWEエージェント(SWE-agent)は、LMエージェントが自律的にコンピュータを使用してソフトウェア工学のタスクを解決するシステムである。
SWEエージェントのカスタムエージェントコンピュータインタフェース(ACI)は、エージェントがコードファイルを作成し編集し、リポジトリ全体をナビゲートし、テストやその他のプログラムを実行する能力を著しく向上させる。
我々はSWE-benchとHumanEvalFixのSWE-agentを評価し、それぞれ12.5%と87.7%のパス@1レートで最先端の性能を実現した。
論文 参考訳（メタデータ） (2024-05-06T17:41:33Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。