論文の概要: An Interdisciplinary Perspective on Evaluation and Experimental Design
for Visual Text Analytics: Position Paper
- arxiv url: http://arxiv.org/abs/2209.11534v1
- Date: Fri, 23 Sep 2022 11:47:37 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-26 17:00:02.691955
- Title: An Interdisciplinary Perspective on Evaluation and Experimental Design
for Visual Text Analytics: Position Paper
- Title(参考訳): 視覚テキスト分析のための評価と実験設計に関する学際的視点:位置紙
- Authors: Kostiantyn Kucher, Nicole Sultanum, Angel Daza, Vasiliki Simaki, Maria
Skeppstedt, Barbara Plank, Jean-Daniel Fekete, and Narges Mahyar
- Abstract要約: 本稿では,視覚的テキスト分析手法の評価に焦点をあてる。
視覚テキスト分析手法を評価する上で,課題の4つの主要なグループを同定する。
- 参考スコア(独自算出の注目度): 24.586485898038312
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Appropriate evaluation and experimental design are fundamental for empirical
sciences, particularly in data-driven fields. Due to the successes in
computational modeling of languages, for instance, research outcomes are having
an increasingly immediate impact on end users. As the gap in adoption by end
users decreases, the need increases to ensure that tools and models developed
by the research communities and practitioners are reliable, trustworthy, and
supportive of the users in their goals. In this position paper, we focus on the
issues of evaluating visual text analytics approaches. We take an
interdisciplinary perspective from the visualization and natural language
processing communities, as we argue that the design and validation of visual
text analytics include concerns beyond computational or visual/interactive
methods on their own. We identify four key groups of challenges for evaluating
visual text analytics approaches (data ambiguity, experimental design, user
trust, and "big picture'' concerns) and provide suggestions for research
opportunities from an interdisciplinary perspective.
- Abstract(参考訳): 適切な評価と実験設計は経験的科学、特にデータ駆動分野において基本である。
例えば、言語の計算モデリングの成功により、研究結果がエンドユーザにすぐに影響を与えるようになっている。
エンドユーザによる採用のギャップが減少するにつれ、研究コミュニティや実践者が開発したツールやモデルが信頼性が高く、信頼性が高く、ユーザを目標に支援する必要性が高まる。
本稿では,ビジュアルテキスト分析手法の評価に関する課題に注目する。
我々は可視化と自然言語処理のコミュニティから学際的な視点を取り、ビジュアルテキスト分析の設計と検証には、それ自体で計算やビジュアル/インタラクティブな方法以上の関心があると主張する。
視覚テキスト分析手法(データあいまいさ,実験設計,ユーザ信頼,および「全体像の懸念」)を評価する上での課題の4つの主要なグループを特定し,学際的な視点から研究機会を提案する。
関連論文リスト
- Data Analysis in the Era of Generative AI [56.44807642944589]
本稿では,AIを活用したデータ分析ツールの可能性について考察する。
我々は、大規模言語とマルチモーダルモデルの出現が、データ分析ワークフローの様々な段階を強化する新しい機会を提供する方法について検討する。
次に、直感的なインタラクションを促進し、ユーザ信頼を構築し、AI支援分析ワークフローを複数のアプリにわたって合理化するための、人間中心の設計原則を調べます。
論文 参考訳(メタデータ) (2024-09-27T06:31:03Z) - Good Idea or Not, Representation of LLM Could Tell [86.36317971482755]
我々は、大規模言語モデルの知識を活用し、科学的アイデアのメリットを評価することを目的としたアイデアアセスメントに焦点をあてる。
我々は、このタスクに対する様々なアプローチのパフォーマンスを訓練し評価するために、細心の注意を払って設計された、フルテキストを持つ約4万の原稿からベンチマークデータセットをリリースする。
その結果, 大規模言語モデルの表現は, 生成出力よりもアイデアの価値を定量化する可能性が高いことが示唆された。
論文 参考訳(メタデータ) (2024-09-07T02:07:22Z) - Combining Objective and Subjective Perspectives for Political News Understanding [5.741243797283764]
本稿では、両視点を統合し、主観的側面のきめ細かい処理を提供するテキスト分析フレームワークを提案する。
本稿では、ニュースメディア、政治的指向、トピック、個々のエンティティ、人口構成に関する洞察とともに、その機能について説明する。
論文 参考訳(メタデータ) (2024-08-20T20:13:19Z) - How Could AI Support Design Education? A Study Across Fields Fuels Situating Analytics [3.362956277221427]
設計教育者による評価とフィードバックの実践の事例研究から得られたプロセスと結果を用いて,理論を推し進める。
人間の活動をサポートするAIを作ることは、どの分析指標と位置するプラクティスを整合させることに依存するため、我々はSateuating Analyticsと呼ぶ方法論を理論化します。
論文 参考訳(メタデータ) (2024-04-26T13:06:52Z) - Research on the Laws of Multimodal Perception and Cognition from a
Cross-cultural Perspective -- Taking Overseas Chinese Gardens as an Example [5.749458457122218]
本研究では,マルチモーダルデータ分析における知覚的相互作用と認知的相互作用の複雑な関係について検討する。
ソーシャルメディア上での評価内容や画像は、個人の関心や感情反応を反映できることがわかった。
論文 参考訳(メタデータ) (2023-12-29T15:13:23Z) - Multi-Dimensional Evaluation of Text Summarization with In-Context
Learning [79.02280189976562]
本稿では,テキスト内学習を用いた多次元評価器として,大規模言語モデルの有効性について検討する。
実験の結果,テキスト要約作業において,文脈内学習に基づく評価手法が学習評価フレームワークと競合していることが判明した。
次に、テキスト内サンプルの選択や数などの要因がパフォーマンスに与える影響を分析する。
論文 参考訳(メタデータ) (2023-06-01T23:27:49Z) - Interactive Natural Language Processing [67.87925315773924]
対話型自然言語処理(iNLP)は,NLP分野における新しいパラダイムとして登場した。
本稿では,iNLPの概念の統一的定義と枠組みを提案することから,iNLPに関する包括的調査を行う。
論文 参考訳(メタデータ) (2023-05-22T17:18:29Z) - You Are What You Talk About: Inducing Evaluative Topics for Personality
Analysis [0.0]
評価言語データは ソーシャルメディアの急速な成長に よりアクセスしやすくなっています
本稿では,事前フィルタした評価テキストにトピックモデルを適用することで得られる評価トピックの概念を紹介する。
次に評価トピックを個々のテキスト作者にリンクして評価プロファイルを構築する。
論文 参考訳(メタデータ) (2023-02-01T15:04:04Z) - The State of the Art in Enhancing Trust in Machine Learning Models with the Use of Visualizations [0.0]
機械学習(ML)モデルは、医学、バイオインフォマティクス、その他の科学など、様々な分野の複雑な応用で使われている。
しかし、ブラックボックスの性質のため、それらが提供する結果を理解し、信頼することは難しいこともある。
これにより、MLモデルの信頼性向上に関連する信頼性の高い視覚化ツールの需要が増加した。
本稿では,インタラクティブな可視化によるMLモデルの信頼性向上について,STAR(State-of-the-Art Report)を提案する。
論文 参考訳(メタデータ) (2022-12-22T14:29:43Z) - A Field Guide to Federated Optimization [161.3779046812383]
フェデレートされた学習と分析は、分散化されたデータからモデル(あるいは統計)を協調的に学習するための分散アプローチである。
本稿では、フェデレート最適化アルゴリズムの定式化、設計、評価、分析に関する勧告とガイドラインを提供する。
論文 参考訳(メタデータ) (2021-07-14T18:09:08Z) - Survey on Visual Sentiment Analysis [87.20223213370004]
本稿では、関連する出版物をレビューし、視覚知覚分析の分野の概要を概観する。
また,3つの視点から一般的な視覚知覚分析システムの設計原理について述べる。
様々なレベルの粒度と、異なる方法でイメージに対する感情に影響を与えるコンポーネントを考慮し、問題の定式化について論じる。
論文 参考訳(メタデータ) (2020-04-24T10:15:22Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。