論文の概要: Data Processing for Offline Evaluation in Recommender Systems: a Survey
- arxiv url: http://arxiv.org/abs/2609.31696v1
- Date: Fri, 18 Sep 2026 16:36:57 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-08 13:41:08.514146
- Title: Data Processing for Offline Evaluation in Recommender Systems: a Survey
- Title(参考訳): レコメンダシステムにおけるオフライン評価のためのデータ処理:サーベイ
- Abstract要約: オフライン評価はレコメンデーターシステム研究において主要な実験パラダイムである。
この調査は、データ処理プラクティスの体系的でクロスドメインな特徴付けを提供する。
- 参考スコア(独自算出の注目度): 10.597026467462225
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Offline evaluation is the dominant experimental paradigm in recommender systems research, enabling reproducible and cost-effective comparisons on historical interaction data. Yet, while considerable attention has been devoted to recommendation models and evaluation methodologies, the data processing decisions that precede model training have received less scrutiny. These decisions determine the information available to recommendation algorithms and can affect the comparability and reproducibility of experimental results. This survey provides a systematic, cross-domain characterisation of data processing practices for the offline evaluation of recommender systems. We examine the data-centric pipeline, from dataset selection and interaction representation to data preparation, multimodal feature extraction, and train-validation-test splitting. Our analysis spans recommendation paradigms, including collaborative, sequential, session-based, graph-based, knowledge-aware, context-aware, multimodal, federated, cross-domain, contrastive-learning, and LLM-based recommendation. Beyond reviewing existing practices, we introduce a unified framework and taxonomy for describing data transformations and feature-extraction strategies, distinguishing data preparation from the extraction of representations from multimodal side information. Our empirical analysis reveals a landscape dominated by a narrow set of dataset-level transformations, particularly support-driven filtering, while representation-dependent transformations remain less common. We further identify substantial heterogeneity in how auxiliary information is prepared and represented, as well as inconsistencies in the specification of data splitting protocols, where similar labels may conceal different experimental conditions.
- Abstract(参考訳): オフライン評価はレコメンデーションシステム研究において主要な実験パラダイムであり、歴史的相互作用データに対する再現性と費用対効果の比較を可能にする。
しかし、推奨モデルや評価手法にかなりの注意が向けられているが、モデルトレーニングに先立つデータ処理の決定は、より精査されることはなかった。
これらの決定は、レコメンデーションアルゴリズムで利用可能な情報を決定し、実験結果の可視性と再現性に影響を与える可能性がある。
この調査は、レコメンダシステムのオフライン評価のために、データ処理プラクティスの体系的でクロスドメインな特徴付けを提供する。
本稿では,データセットの選択とインタラクション表現からデータ準備,マルチモーダル特徴抽出,列車検証-テスト分割まで,データ中心パイプラインについて検討する。
我々の分析は、協調的、シーケンシャル、セッションベース、グラフベース、知識認識、コンテキスト認識、マルチモーダル、フェデレーション、クロスドメイン、コントラッシブラーニング、LLMベースのレコメンデーションなど、レコメンデーションパラダイムにまたがっている。
既存のプラクティスのレビュー以外にも,データ変換と特徴抽出戦略を記述するための統合されたフレームワークと分類を導入し,マルチモーダル側情報からの表現の抽出からデータ準備を区別する。
私たちの経験的分析は、データセットレベルの変換の狭いセット、特にサポート駆動フィルタリングに支配される状況を明らかにしていますが、表現依存変換は依然として一般的ではありません。
さらに、補助情報の作成や表現の仕方や、類似ラベルが異なる実験条件を隠蔽するデータ分割プロトコルの仕様の不整合についても明らかにする。
関連論文リスト
- Data Mixing for Large Language Models Pretraining: A Survey and Outlook [52.66761353708619]
大規模言語モデル(LLM)は、大規模で不均一なコーパスの事前訓練に依存している。
サンプルレベルのデータ選択とは異なり、データミキシングはドメインレベルのサンプリング重量を最適化し、限られた予算をより効率的に割り当てる。
本稿では,LLM事前学習におけるデータ混合の総合的な検討について述べる。
論文 参考訳(メタデータ) (2026-03-25T13:30:40Z) - Federated Online Learning for Heterogeneous Multisource Streaming Data [0.0]
フェデレートラーニングは、プライバシの懸念の下で分散マルチソースデータ分析に不可欠なパラダイムとして登場した。
本稿では,分散マルチソースストリーミングデータ解析のためのFOL手法を提案する。
論文 参考訳(メタデータ) (2025-08-08T19:08:53Z) - Take the essence and discard the dross: A Rethinking on Data Selection for Fine-Tuning Large Language Models [36.22392593103493]
微調整された大規模言語モデル(LLM)のデータ選択は、既存のデータセットから高品質なサブセットを選択することを目的としている。
既存の調査では、微調整フェーズの詳細な調査を見落としている。
特徴抽出, 基準設計, セレクタ評価を含む新しい3段階の手法を導入し, これらの手法を体系的に分類し, 評価する。
論文 参考訳(メタデータ) (2024-06-20T08:58:58Z) - Exploring Popularity Bias in Session-based Recommendation [0.6798775532273751]
セッションベースの設定と適応確率計算に分析を拡張し、セッションベースのレコメンデーションタスクの独特な特性に適応する。
本研究では、異なるデータセット上での確率分布と異なる階層化手法について検討し、確率関連特性が実際にデータセット固有のものであることを見出した。
論文 参考訳(メタデータ) (2023-12-13T02:48:35Z) - Embedding in Recommender Systems: A Survey [54.55152033023537]
本調査では,レコメンデータシステム埋め込み技術の進歩を包括的に分析する。
マトリックスベースのシナリオでは、協調フィルタリングはユーザの好みを効果的にモデル化する埋め込みを生成する。
パフォーマンス向上のため,AutoMLやハッシュ技術,量子化手法など,新たなアプローチを導入する。
論文 参考訳(メタデータ) (2023-10-28T06:31:06Z) - Tackling Diverse Minorities in Imbalanced Classification [80.78227787608714]
不均衡データセットは、様々な現実世界のアプリケーションで一般的に見られ、分類器の訓練において重要な課題が提示されている。
マイノリティクラスとマイノリティクラスの両方のデータサンプルを混合することにより、反復的に合成サンプルを生成することを提案する。
提案するフレームワークの有効性を,7つの公開ベンチマークデータセットを用いて広範な実験により実証する。
論文 参考訳(メタデータ) (2023-08-28T18:48:34Z) - Reinforced Approximate Exploratory Data Analysis [7.974685452145769]
まず,対話型データ探索環境におけるサンプリングの影響について検討し,近似誤差を導入する。
本稿では, サンプル選択を最適化し, 分析および洞察フローの持続性を維持するための, 深層強化学習(DRL)に基づくフレームワークを提案する。
論文 参考訳(メタデータ) (2022-12-12T20:20:22Z) - Learning Bias-Invariant Representation by Cross-Sample Mutual
Information Minimization [77.8735802150511]
対象タスクが誤用したバイアス情報を除去するために,クロスサンプル対逆脱バイアス法(CSAD)を提案する。
相関測定は, 対向的偏り評価において重要な役割を担い, クロスサンプル型相互情報推定器によって行われる。
我々は,提案手法の最先端手法に対する利点を検証するために,公開データセットの徹底的な実験を行った。
論文 参考訳(メタデータ) (2021-08-11T21:17:02Z) - CDEvalSumm: An Empirical Study of Cross-Dataset Evaluation for Neural
Summarization Systems [121.78477833009671]
データセット間設定下での様々な要約モデルの性能について検討する。
異なるドメインの5つのデータセットに対する11の代表的な要約システムに関する包括的な研究は、モデルアーキテクチャと生成方法の影響を明らかにしている。
論文 参考訳(メタデータ) (2020-10-11T02:19:15Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。