論文の概要: Beauty in the Eye of AI: Aligning LLMs and Vision Models with Human Aesthetics in Network Visualization
- arxiv url: http://arxiv.org/abs/2604.03417v1
- Date: Fri, 03 Apr 2026 19:30:34 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-07 15:49:18.562649
- Title: Beauty in the Eye of AI: Aligning LLMs and Vision Models with Human Aesthetics in Network Visualization
- Title(参考訳): AIの目における美: ネットワークの可視化における人間の美学によるLLMと視覚モデルのアライメント
- Abstract要約: 人間の判断のためのプロキシとして,大規模言語モデル (LLM) と視覚モデル (VM) について検討する。
画像埋め込みなどの多種多様な入力形式を組み合わさったプロンプトエンジニアリングにより,LLMと人間のアライメントが大幅に向上することを示す。
以上の結果から,AIが人間のラベル付けのスケーラブルなプロキシとして機能する可能性が示唆された。
- 参考スコア(独自算出の注目度): 47.53880889741314
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Network visualization has traditionally relied on heuristic metrics, such as stress, under the assumption that optimizing them leads to aesthetic and informative layouts. However, no single metric consistently produces the most effective results. A data-driven alternative is to learn from human preferences, where annotators select their favored visualization among multiple layouts of the same graphs. These human-preference labels can then be used to train a generative model that approximates human aesthetic preferences. However, obtaining human labels at scale is costly and time-consuming. As a result, this generative approach has so far been tested only with machine-labeled data. In this paper, we explore the use of large language models (LLMs) and vision models (VMs) as proxies for human judgment. Through a carefully designed user study involving 27 participants, we curated a large set of human preference labels. We used this data both to better understand human preferences and to bootstrap LLM/VM labelers. We show that prompt engineering that combines few-shot examples and diverse input formats, such as image embeddings, significantly improves LLM-human alignment, and additional filtering by the confidence score of the LLM pushes the alignment to human-human levels. Furthermore, we demonstrate that carefully trained VMs can achieve VM-human alignment at a level comparable to that between human annotators. Our results suggest that AI can feasibly serve as a scalable proxy for human labelers.
- Abstract(参考訳): ネットワークの可視化は伝統的にストレスのようなヒューリスティックな指標に依存してきた。
しかし、一つの計量が常に最も効果的な結果を生み出すことはない。
データ駆動の代替手段は人間の好みから学び、アノテータは同じグラフの複数のレイアウトの中で好きな視覚化を選択することである。
これらの人間の嗜好ラベルは、人間の美的嗜好を近似する生成モデルを訓練するために使用することができる。
しかし、人間のラベルを大規模に取得するにはコストと時間を要する。
結果として、この生成的アプローチは、これまでマシンラベル付きデータでのみテストされてきた。
本稿では,人間の判断のためのプロキシとして,大規模言語モデル (LLM) と視覚モデル (VM) の利用について検討する。
27名の被験者を対象とする慎重にデザインされたユーザスタディを通じて,人間の嗜好ラベルを多数収集した。
私たちはこのデータを使って、人間の好みをよりよく理解し、LLM/VMラベルをブートストラップしました。
画像埋め込みなどの多彩な入力形式と少数ショットの例を組み合わせた迅速なエンジニアリングにより,LLMと人間のアライメントが大幅に向上し,LLMの信頼性スコアによる追加フィルタリングによって人間-人間のレベルへのアライメントが促進されることを示す。
さらに、慎重に訓練されたVMは、人間のアノテータと同等のレベルで、VMと人間のアライメントを達成できることを示す。
以上の結果から,AIが人間のラベル付けのスケーラブルなプロキシとして機能する可能性が示唆された。
関連論文リスト
- AI Outperforms Humans in Personalized Image Aesthetics Assessment via LLM-Based Interviews and Semantic Feature Extraction [2.905751301655124]
画像の個々の美的評価を正確に予測することは、AIの基本的な課題である。
半構造化インタビューを通して美的嗜好を取り入れた統合型DL-LLMシステムを開発した。
以上の結果から,提案システムは高画質画像に対して特に高い性能を示し,その性能に優れることがわかった。
論文 参考訳(メタデータ) (2026-05-14T12:24:23Z) - HumanLLM: Towards Personalized Understanding and Simulation of Human Nature [72.55730315685837]
HumanLLMは個人のパーソナライズされた理解とシミュレーションのために設計された基礎モデルである。
私たちはまず、Reddit、Twitter、Blogger、Amazonといったプラットフォーム上で、現実世界のユーザデータをキュレートした大規模なコーパスであるCognitive Genomeを構築しました。
次に、多様な学習タスクを定式化し、教師付き微調整を行い、モデルの幅広い個人化された人間の行動、思考、経験を予測する。
論文 参考訳(メタデータ) (2026-01-22T09:27:27Z) - Improving Large Vision and Language Models by Learning from a Panel of Peers [27.83658413272528]
本研究では,人間同士の協調学習に触発された新しいパネル・オブ・ピアス学習フレームワークを提案する。
ピアレビューシステムをシミュレートすることで、我々のモデルは、キュレートされた一連のプロンプトに応答して出力を生成し、評価し、精製する。
本実験は,複数のベンチマークにおいて有意な改善を示し,自己監督アライメントに代わるスケーラブルな代替手段としてのピア評価の可能性を示した。
論文 参考訳(メタデータ) (2025-09-01T16:43:48Z) - A Data-Centric Revisit of Pre-Trained Vision Models for Robot Learning [67.72413262980272]
事前訓練された視覚モデル(PVM)は現代のロボティクスの基本であるが、その最適構成は定かではない。
セマンティック・ボトルネックを導入してオブジェクト中心の表現を誘導する手法であるSlotMIMを開発した。
提案手法は,画像認識,シーン理解,ロボット学習評価において,従来の作業よりも大幅に改善されている。
論文 参考訳(メタデータ) (2025-03-10T06:18:31Z) - Online Learning from Strategic Human Feedback in LLM Fine-Tuning [16.35495567193046]
人間からのフィードバックからの強化学習(RLHF)は、人間の好みに合わせるために、大規模言語モデル(LLM)を微調整する上で不可欠なステップとなっている。
LLMファインチューニングプロセスにおける戦略的ラベル付け者に対するオンライン学習機構について検討した。
我々は新しい動的ベイズゲームを定式化し、好みのアグリゲーションにおいて人間のラベルの重みを動的に調整する。
論文 参考訳(メタデータ) (2024-12-22T02:43:07Z) - Maximizing Alignment with Minimal Feedback: Efficiently Learning Rewards for Visuomotor Robot Policy Alignment [73.14105098897696]
本研究では,人間の嗜好フィードバックをはるかに少なくして視覚的報酬を学習するための表現適応型選好学習(RAPL)を提案する。
RAPLは、エンドユーザの視覚表現に合わせて微調整された事前学習された視覚エンコーダに焦点を合わせ、特徴マッチングによって密集した視覚報酬を構築する。
RAPLは人間の嗜好に沿った報酬を学習し、より効率的に嗜好データを使用し、ロボットの具体化を一般化できることを示す。
論文 参考訳(メタデータ) (2024-12-06T08:04:02Z) - Hybrid Preferences: Learning to Route Instances for Human vs. AI Feedback [87.37721254914476]
我々はHyPERを紹介した。HyPERは、人間または言語モデル(LM)にアノテーションを付与するハイブリッド推論ルータである。
その結果,HyPERを用いた人工選好と直接選好の混合は,RewardBenchでは7-13%しか使用せず,RM性能が向上していることがわかった。
また、HyPERの機能を分析した結果、安全上の懸念や複雑さが人間のフィードバックから最も恩恵を受けていることがわかりました。
論文 参考訳(メタデータ) (2024-10-24T20:04:15Z) - Dissecting Human and LLM Preferences [80.55271307662365]
人間は誤りに敏感ではなく、自分の姿勢を支持する反応を好んでおり、モデルが限界を認めている場合、明確な嫌悪を示します。
GPT-4-Turboのような先進的なLCMは、より正確さ、明快さ、無害さを強調している。
嗜好に基づく評価は意図的に操作可能であることを示す。
論文 参考訳(メタデータ) (2024-02-17T14:34:31Z) - VisAlign: Dataset for Measuring the Degree of Alignment between AI and
Humans in Visual Perception [32.376529738717736]
画像分類の観点からAIと人間の視覚的アライメントを測定するための新しいデータセットを提案する。
我々のデータセットは、Must-Act(Must-Classify)、Must-Abstain、Uncertainの3つのサンプルからなる。
一般的な5つの視覚知覚モデルと7つの禁忌手法の視覚的アライメントと信頼性を分析した。
論文 参考訳(メタデータ) (2023-08-03T04:04:03Z) - Towards Good Practices for Efficiently Annotating Large-Scale Image
Classification Datasets [90.61266099147053]
多数の画像の分類ラベルを収集するための効率的なアノテーション戦略を検討する。
人間のラベリング作業を最小化するための修正とベストプラクティスを提案します。
ImageNet100の125kイメージサブセットのシミュレーション実験では、平均で0.35のアノテーションで80%のトップ-1の精度でアノテートできることが示されている。
論文 参考訳(メタデータ) (2021-04-26T16:29:32Z) - A Machine Learning Approach for Predicting Human Preference for Graph
Layouts [46.31441679172231]
グラフレイアウトの人間の好みを予測するための最初の機械学習アプローチを紹介します。
基本真理の人間の好みデータセットを用いた実験結果から,モデルがグラフレイアウトの人間の好みを正しく予測できることが示された。
論文 参考訳(メタデータ) (2021-03-01T23:54:54Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。