論文の概要: Task-Aware Automated User Profile Generation for Recommendation Simulation Using Large Language Models
- arxiv url: http://arxiv.org/abs/2605.13497v1
- Date: Wed, 13 May 2026 13:20:39 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-14 23:30:28.068538
- Title: Task-Aware Automated User Profile Generation for Recommendation Simulation Using Large Language Models
- Title(参考訳): 大規模言語モデルを用いた推薦シミュレーションのためのタスクアウェア自動ユーザプロファイル生成
- Authors: Xinye Wanyan, Chenglong Ma, Danula Hettiachchi, Ziqi Xu, Jeffrey Chan,
- Abstract要約: 本稿では,推薦シミュレーションのための自動プロファイル生成フレームワーク APG4RecSimを提案する。
APG4RecSimは、最小限の監督で、現実的で、一貫性があり、堅牢なユーザープロファイルを構築する。
以上の結果から, APG4RecSimが生成するプロファイルは, 人気や位置によるバイアスに耐性があることが示唆された。
- 参考スコア(独自算出の注目度): 8.706093337738869
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Large Language Model (LLM)-based agent simulation has emerged as a promising approach to meet the increasing demand for real-time and rigorous evaluation in modern recommender systems. A typical LLM-driven simulation framework comprises three essential components: the profile module, memory module, and action module. However, existing studies have primarily concentrated on enhancing the memory and action modules, with limited attention to profile generation, which plays a pivotal role in ensuring realistic agent behaviours and aligning simulated interactions with real user dynamics. Moreover, the scarcity of datasets specifically designed for recommendation simulations has led to heavy reliance on manually crafted profiles, significantly limiting the scalability and generalisability of simulation frameworks across different datasets. To address these challenges, this work proposes an Automated Profile Generation Framework for Recommendation Simulation, APG4RecSim, that constructs realistic, coherent, and robust user profiles with minimal supervision. Extensive experiments on three benchmark datasets demonstrate that APG4RecSim achieves the best overall performance on discrimination, ranking, and rating tasks, improving ranking quality by up to 7% in nDCG@10 and reducing rating distribution divergence by 8% in JSD compared to existing profile-generation baselines. Beyond overall performance gains, our results show that profiles generated by APG4RecSim are resilient to popularity- and position-induced biases and maintain stable performance across datasets and different LLMs.
- Abstract(参考訳): 大規模言語モデル(LLM)に基づくエージェントシミュレーションは,現代のレコメンデータシステムにおけるリアルタイム・厳密な評価の需要の増大に対応するための,有望なアプローチとして登場した。
典型的なLCM駆動のシミュレーションフレームワークは、プロファイルモジュール、メモリモジュール、アクションモジュールの3つの必須コンポーネントで構成されている。
しかし、既存の研究は主にメモリとアクションモジュールの強化に重点を置いており、実際のエージェント動作の確保と実際のユーザダイナミクスとのシミュレートされた相互作用の整合において重要な役割を果たすプロファイル生成に注意を向けている。
さらに、レコメンデーションシミュレーション用に特別に設計されたデータセットの不足は、手作業によるプロファイルに大きく依存するようになり、異なるデータセットにわたるシミュレーションフレームワークのスケーラビリティと一般化性を著しく制限している。
これらの課題に対処するために、この研究は、最小限の監督で現実的で一貫性があり堅牢なユーザープロファイルを構築する、推奨シミュレーションのための自動プロファイル生成フレームワーク、APG4RecSimを提案する。
3つのベンチマークデータセットに対する大規模な実験により、APG4RecSimは、差別、ランキング、レーティングタスクにおける最高の全体的なパフォーマンスを達成し、ランキング品質をnDCG@10で最大7%改善し、既存のプロファイル生成ベースラインと比較して、JSDで評価分布のばらつきを8%低減した。
APG4RecSimによって生成されたプロファイルは、全体的なパフォーマンス向上以外にも、人気や位置によるバイアスに耐性があり、データセットや異なるLLM間で安定したパフォーマンスを維持することができる。
関連論文リスト
- Toward Visually Realistic Simulation: A Benchmark for Evaluating Robot Manipulation in Simulation [62.51953630639423]
既存のベンチマークには視覚的リアリズムがなく、シミュレーションと現実の間に大きな領域ギャップが生じる。
シミュレーションにおけるロボット操作評価のための,視覚的にリアルなベンチマークであるVISERを提案する。
VISERは、物理ベースのレンダリング(PBR)素材を備えた1000以上の3Dアセットの高忠実度データセットと、それらのアセットから作成される3Dシーンを、レイアウトや生成によって構成する。
論文 参考訳(メタデータ) (2026-05-07T14:13:05Z) - One Model to Critique Them All: Rewarding Agentic Tool-Use via Efficient Reasoning [54.580646706013965]
リワードモデル(RM)は、大きな言語モデルと人間の嗜好の整合において重要な役割を果たす。
一般的なツール使用シナリオに適した軽量な生成型RMのファミリーであるToolRMを紹介する。
これらのモデルを構築するために,ルールベースのスコアリングと多次元サンプリングを用いたペアワイズ選好データを構築するパイプラインを提案する。
論文 参考訳(メタデータ) (2025-10-30T06:08:27Z) - SimBench: Benchmarking the Ability of Large Language Models to Simulate Human Behaviors [58.87134689752605]
我々は,LLMシミュレーションの堅牢で再現可能な科学のための,最初の大規模標準ベンチマークであるSimBenchを紹介する。
現在、最高のLLMでさえシミュレーション能力が限られ(スコア: 40.80/100)、性能はモデルサイズと対数的にスケールする。
シミュレーション能力は、深い知識集約的推論と最も強く相関していることを示す。
論文 参考訳(メタデータ) (2025-10-20T13:14:38Z) - Large Language Models as Virtual Survey Respondents: Evaluating Sociodemographic Response Generation [18.225151370273093]
本稿では,Large Language Models (LLMs) を用いた仮想調査回答者のシミュレーションを行う。
部分属性シミュレーション(PAS)と完全属性シミュレーション(FAS)の2つの新しいシミュレーション設定を導入する。
LLM-S3 (Large Language Model-based Sociodemography Simulation Survey) は4つの社会学領域にまたがる11の現実世界の公開データセットにまたがる総合ベンチマークスイートである。
論文 参考訳(メタデータ) (2025-09-08T04:59:00Z) - Diagnostic-Guided Dynamic Profile Optimization for LLM-based User Simulators in Sequential Recommendation [15.61963892566877]
DGDPOは動的かつ反復的な最適化プロセスを通じてユーザプロファイルを構築する新しいフレームワークである。
シングルラウンドインタラクションに限定された既存のLCMベースのユーザシミュレータとは異なり、DGDPOをシーケンシャルレコメンデータと統合するのは初めてです。
論文 参考訳(メタデータ) (2025-08-18T06:17:59Z) - Investigating the Robustness of Counterfactual Learning to Rank Models: A Reproducibility Study [71.04084063541777]
ランク付けのためのカウンターファクトラーニングはIRコミュニティで広く注目を集めている。
モデルは、ユーザの振る舞いの仮定が正しく、確率推定が正確であるときに理論的に非バイアス化される。
それらの有効性は通常シミュレーションベースの実験を通じて実証的に評価されるが、これは広く利用可能な大規模で実際のクリックログが不足しているためである。
論文 参考訳(メタデータ) (2024-04-04T10:54:38Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。