論文の概要: PromptInfuser: How Tightly Coupling AI and UI Design Impacts Designers' Workflows

• arxiv url: http://arxiv.org/abs/2310.15435v1
• Date: Tue, 24 Oct 2023 01:04:27 GMT
• ステータス: 処理完了
• システム内更新日: 2023-10-25 21:01:26.908466
• Title: PromptInfuser: How Tightly Coupling AI and UI Design Impacts Designers' Workflows
• Title（参考訳）: PromptInfuser: AIとUIデザインの密結合がデザイナのワークフローに与える影響
• Authors: Savvas Petridis, Michael Terry, Carrie J. Cai
• Abstract要約: 設計者のAIイテレーションに,プロンプトとUIデザインの結合がどう影響するかを検討する。 本研究では,ユーザがモックアップを作成できるFigmaプラグインであるPromptInfuserを開発した。 14人のデザイナによる調査では、PromptInfuserとデザイナの現在のAIプロトタイピングワークフローを比較します。
• 参考スコア（独自算出の注目度）: 23.386764579779538
• License: http://creativecommons.org/licenses/by/4.0/
• Abstract: Prototyping AI applications is notoriously difficult. While large language model (LLM) prompting has dramatically lowered the barriers to AI prototyping, designers are still prototyping AI functionality and UI separately. We investigate how coupling prompt and UI design affects designers' workflows. Grounding this research, we developed PromptInfuser, a Figma plugin that enables users to create semi-functional mockups, by connecting UI elements to the inputs and outputs of prompts. In a study with 14 designers, we compare PromptInfuser to designers' current AI-prototyping workflow. PromptInfuser was perceived to be significantly more useful for communicating product ideas, more capable of producing prototypes that realistically represent the envisioned artifact, more efficient for prototyping, and more helpful for anticipating UI issues and technical constraints. PromptInfuser encouraged iteration over prompt and UI together, which helped designers identify UI and prompt incompatibilities and reflect upon their total solution. Together, these findings inform future systems for prototyping AI applications.
• Abstract（参考訳）: AIアプリケーションのプロトタイプ作成は、非常に難しい。 大規模言語モデル(LLM)のプロトタイピングがAIプロトタイピングの障壁を劇的に減らしたが、デザイナはまだAI機能とUIを別々にプロトタイピングしている。 プロンプトとuiデザインの結合がデザイナのワークフローに与える影響について検討する。 本研究では,UI要素をインプットやプロンプトの出力に接続することで,半機能的なモックアップを作成できるプラグインであるPromptInfuserを開発した。 14人のデザイナーによる研究で、promiseinfuserとデザイナーの現在のaiプロトタイピングワークフローを比較した。 PromptInfuserはプロダクトのアイデアを伝えるのに非常に有用であり、想定されたアーティファクトを現実的に表現し、プロトタイピングをより効率的にし、UIの問題や技術的な制約を予測するのに役立ちます。 PromptInfuserは、プロンプトとUIを合わせてイテレーションを奨励した。 これらの発見は、AIアプリケーションをプロトタイピングする将来のシステムに通知する。

関連論文リスト

• On AI-Inspired UI-Design [5.969881132928718]
  アプリデザイナがモバイルアプリのより優れた、より多様な、創造的なUIを作成するのをサポートするために、AI(Artificial Intelligence)を使用する方法に関する3つの主要な補完的なアプローチについて議論する。 まず、デザイナーはGPTのようなLarge Language Model(LLM)に1つまたは複数のUIを直接生成、調整するよう促すことができる。 第2に、VLM(Vision-Language Model)により、デザイナは、アプリストアに公開されたアプリから、大規模なスクリーンショットデータセットを効率的に検索することができる。 第3に、ディフュージョンモデル(DM)は、インスピレーションのあるイメージとしてアプリUIを生成するように設計されている。
  論文  参考訳（メタデータ） (2024-06-19T15:28:21Z)
• UIClip: A Data-driven Model for Assessing User Interface Design [20.66914084220734]
  ユーザインタフェースの設計品質と視覚的関連性を評価するための機械学習モデルUIClipを開発した。 UIClipがUI設計品質の即時評価に依存するダウンストリームアプリケーションをどのように促進するかを示す。
  論文  参考訳（メタデータ） (2024-04-18T20:43:08Z)
• Farsight: Fostering Responsible AI Awareness During AI Application Prototyping [32.235398722593544]
  私たちはFarsightという、プロトタイピング中のAIアプリケーションから潜在的な害を識別する新しい対話型ツールを紹介します。 ユーザのプロンプトに基づいて、Farsightは関連するAIインシデントに関するニュース記事を強調し、LLM生成したユースケースやステークホルダ、障害を調査、編集することを可能にする。 10人のAIプロトタイプを用いた共同設計研究と42人のAIプロトタイプを用いたユーザスタディから得られた知見を報告する。
  論文  参考訳（メタデータ） (2024-02-23T14:38:05Z)
• Compositional Generative Inverse Design [69.22782875567547]
  入力変数を設計して目的関数を最適化する逆設計は重要な問題である。 拡散モデルにより得られた学習エネルギー関数を最適化することにより、そのような逆例を避けることができることを示す。 N-body 相互作用タスクと2次元多面体設計タスクにおいて,実験時に学習した拡散モデルを構成することにより,初期状態と境界形状を設計できることを示す。
  論文  参考訳（メタデータ） (2024-01-24T01:33:39Z)
• The role of interface design on prompt-mediated creativity in Generative AI [0.0]
  2つのジェネレーティブAIプラットフォームから145,000以上のプロンプトを分析します。 その結果,利用者は以前訪れた概念の活用よりも,新たなトピックを探求する傾向にあることがわかった。
  論文  参考訳（メタデータ） (2023-11-30T22:33:34Z)
• Interactive Text Generation [75.23894005664533]
  我々は,対話型テキスト生成タスクを導入し,実際のユーザを巻き込むことなく,対話型テキスト生成モデルのトレーニングを可能にする。 我々は、Imitation Learningを用いてインタラクティブモデルをトレーニングし、競合する非インタラクティブな生成モデルに対する実験により、インタラクティブにトレーニングされたモデルは非インタラクティブなモデルよりも優れていることを示す。
  論文  参考訳（メタデータ） (2023-03-02T01:57:17Z)
• Optimizing Prompts for Text-to-Image Generation [97.61295501273288]
  よく設計されたプロンプトは、テキストから画像へのモデルをガイドし、素晴らしい画像を生成する。 しかし、パフォーマンスプロンプトはモデル固有であり、ユーザ入力と不一致であることが多い。 本稿では,モデル優先のプロンプトにオリジナルのユーザ入力を自動的に適応するフレームワークであるpromise adaptを提案する。
  論文  参考訳（メタデータ） (2022-12-19T16:50:41Z)
• Interactive and Visual Prompt Engineering for Ad-hoc Task Adaptation with Large Language Models [116.25562358482962]
  最先端のニューラルネットワークモデルは、教師付きトレーニングを必要とせずに、アドホックな言語タスクを解決するために使用することができる。 PromptIDEを使えば、ユーザはプロンプトのバリエーションを試すことができ、プロンプトのパフォーマンスを視覚化し、反復的にプロンプトを最適化できる。
  論文  参考訳（メタデータ） (2022-08-16T17:17:53Z)
• The MineRL BASALT Competition on Learning from Human Feedback [58.17897225617566]
  MineRL BASALTコンペティションは、この重要な種類の技術の研究を促進することを目的としている。 Minecraftでは、ハードコードされた報酬関数を書くのが難しいと期待する4つのタスクのスイートを設計しています。 これら4つのタスクのそれぞれについて、人間のデモのデータセットを提供するとともに、模擬学習ベースラインを提供する。
  論文  参考訳（メタデータ） (2021-07-05T12:18:17Z)
• VINS: Visual Search for Mobile User Interface Design [66.28088601689069]
  本稿では、UIイメージを入力として、視覚的に類似したデザイン例を検索するビジュアル検索フレームワークVINSを紹介する。 このフレームワークは、平均平均精度76.39%のUI検出を実現し、類似したUI設計をクエリする際の高いパフォーマンスを実現している。
  論文  参考訳（メタデータ） (2021-02-10T01:46:33Z)
• BlackBox Toolkit: Intelligent Assistance to UI Design [9.749560288448114]
  人工知能(AI)によるUI設計プロセスの変更を提案する。 我々は,デザイナが創造プロセスの指揮を執りながら,デザイナに対して反復的なタスクを実行できるようにすることを提案する。
  論文  参考訳（メタデータ） (2020-04-04T14:50:26Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。