論文の概要: Addressing the Rank Degeneration in Sequential Recommendation via
Singular Spectrum Smoothing
- arxiv url: http://arxiv.org/abs/2306.11986v1
- Date: Wed, 21 Jun 2023 02:42:37 GMT
- ステータス: 処理完了
- システム内更新日: 2023-06-22 15:07:32.662347
- Title: Addressing the Rank Degeneration in Sequential Recommendation via
Singular Spectrum Smoothing
- Title(参考訳): Singular Spectrum Smoothingによる逐次推薦におけるランク劣化の対応
- Authors: Ziwei Fan, Zhiwei Liu, Hao Peng, and Philip S. Yu
- Abstract要約: 逐次レコメンデーション(SR)は、動的ユーザ嗜好モデリングを調査し、次のイテム予測を生成する。
シーケンスとアイテムの表現は、データ空間の問題によりランク劣化の問題に悩まされる。
本稿では,列と項目の双方における階調劣化を軽減するために,規則化を円滑にする新しい特異スペクトルを提案する。
- 参考スコア(独自算出の注目度): 75.13552062552174
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Sequential recommendation (SR) investigates the dynamic user preferences
modeling and generates the next-item prediction. The next item preference is
typically generated by the affinity between the sequence and item
representations. However, both sequence and item representations suffer from
the rank degeneration issue due to the data sparsity problem. The rank
degeneration issue significantly impairs the representations for SR. This
motivates us to measure how severe is the rank degeneration issue and alleviate
the sequence and item representation rank degeneration issues simultaneously
for SR.
In this work, we theoretically connect the sequence representation
degeneration issue with the item rank degeneration, particularly for short
sequences and cold items. We also identify the connection between the fast
singular value decay phenomenon and the rank collapse issue in transformer
sequence output and item embeddings. We propose the area under the singular
value curve metric to evaluate the severity of the singular value decay
phenomenon and use it as an indicator of rank degeneration. We further
introduce a novel singular spectrum smoothing regularization to alleviate the
rank degeneration on both sequence and item sides, which is the Singular
sPectrum sMoothing for sequential Recommendation (SPMRec). We also establish a
correlation between the ranks of sequence and item embeddings and the rank of
the user-item preference prediction matrix, which can affect recommendation
diversity. We conduct experiments on four benchmark datasets to demonstrate the
superiority of SPMRec over the state-of-the-art recommendation methods,
especially in short sequences. The experiments also demonstrate a strong
connection between our proposed singular spectrum smoothing and recommendation
diversity.
- Abstract(参考訳): 逐次レコメンデーション(SR)は、動的ユーザ嗜好モデリングを調査し、次のイテム予測を生成する。
次の項目の好みは通常、シーケンスとアイテムの表現の間の親和性によって生成される。
しかし、シーケンス表現とアイテム表現は、データ空間の問題によりランク劣化の問題に悩まされる。
ランク劣化問題は、SRの表現を著しく損なう。
これにより、ランクデジェネレーション問題がどれほど深刻かを測定し、SRのシーケンスとアイテム表現のランクデジェネレーション問題を同時に緩和する。
本研究では,シーケンス表現の退化問題とアイテムランクの退化問題,特にショートシーケンスやコールドアイテムについて理論的に関連付ける。
また,変圧器列出力とアイテム埋め込みにおける高速特異値減衰現象とランク崩壊問題との関係を明らかにした。
特異値減衰現象の重症度を評価するために, 特異値曲線計量の下の領域を提案し, 階数劣化の指標として用いる。
さらに、シーケンシャルレコメンデーションのためのSingular sPectrum sMoothing(SPMRec)という、シーケンシャルおよびアイテムサイドの階調劣化を軽減するために、規則化を円滑にする新しい特異スペクトルを導入する。
また、シーケンスとアイテムの埋め込みのランクとユーザの好み予測行列のランクの相関関係を確立し、推薦の多様性に影響を与える可能性がある。
4つのベンチマークデータセットで実験を行い,spmrecが最先端のレコメンデーション手法,特に短いシーケンスよりも優れていることを示す。
実験はまた、提案した特異スペクトルの滑らか化と推薦多様性の強い関係を示す。
関連論文リスト
- DLCRec: A Novel Approach for Managing Diversity in LLM-Based Recommender Systems [9.433227503973077]
LLMに基づくレコメンデーションにおいて,多様性のきめ細かい制御を可能にする新しいフレームワークを提案する。
従来の方法とは異なり、DLCRecはきめ細かいタスク分解戦略を採用し、推奨プロセスを3つのサブタスクに分割する。
本稿では,ノイズやアウト・オブ・ディストリビューションデータに対するモデルの堅牢性を高める2つのデータ拡張手法を提案する。
論文 参考訳(メタデータ) (2024-08-22T15:10:56Z) - DimeRec: A Unified Framework for Enhanced Sequential Recommendation via Generative Diffusion Models [39.49215596285211]
シークエンシャルレコメンデーション(SR:Sequential Recommendation)は、非定常的な歴史的相互作用に基づいてユーザの好みに合わせてレコメンデーションを調整することによって、レコメンデーションシステムにおいて重要な役割を担っている。
誘導抽出モジュール(GEM)と生成拡散凝集モジュール(DAM)を組み合わせたDimeRecという新しいフレームワークを提案する。
我々の数値実験により、DimeRecは3つの公開データセットで確立されたベースライン法よりも大幅に優れていることが示された。
論文 参考訳(メタデータ) (2024-08-22T06:42:09Z) - Semantic Codebook Learning for Dynamic Recommendation Models [55.98259490159084]
動的シーケンシャルレコメンデーション(DSR)は、ユーザの振る舞いに基づいてモデルパラメータを生成し、シーケンシャルレコメンデーションのパーソナライズを改善する。
巨大なパラメータ探索空間と疎結合でノイズの多いユーザ-イテム相互作用の課題に直面するため、生成されたモデルパラメータの適用性が低下する。
Semantic Codebook Learning for Dynamic Recommendation Models (SOLID)フレームワークは、これらの課題に効果的に取り組むことで、DSRの大幅な進歩を示す。
論文 参考訳(メタデータ) (2024-07-31T19:25:25Z) - Diffusion-based Contrastive Learning for Sequential Recommendation [6.3482831836623355]
本稿では,CaDiRecという,文脈対応拡散に基づく逐次推薦のためのコントラスト学習を提案する。
CaDiRecは、コンテキスト対応拡散モデルを使用して、シーケンス内の所定の位置に対する代替アイテムを生成する。
フレームワーク全体をエンドツーエンドでトレーニングし、拡散モデルとレコメンデーションモデルの間でアイテムの埋め込みを共有します。
論文 参考訳(メタデータ) (2024-05-15T14:20:37Z) - Generative Slate Recommendation with Reinforcement Learning [49.75985313698214]
強化学習アルゴリズムは、レコメンデータシステムのユーザエンゲージメントを最適化するために使用することができる。
しかし、RLアプローチはスレートレコメンデーションシナリオでは難解である。
この設定では、アクションはアイテムの組み合わせを含むことができるスレートに対応する。
本研究では,変分オートエンコーダによって学習された連続低次元ラテント空間におけるスレートの符号化を提案する。
我々は、(i)以前の作業で要求される仮定を緩和し、(ii)完全なスレートをモデル化することで、アクション選択の品質を向上させることができる。
論文 参考訳(メタデータ) (2023-01-20T15:28:09Z) - Contrastive Self-supervised Sequential Recommendation with Robust
Augmentation [101.25762166231904]
Sequential Recommendation Describes a set of technique to model dynamic user behavior to order to predict future interaction in sequence user data。
データスパーシリティやノイズの多いデータなど、古くて新しい問題はまだ残っている。
逐次レコメンデーション(CoSeRec)のためのコントラスト型自己監督学習を提案する。
論文 参考訳(メタデータ) (2021-08-14T07:15:25Z) - Variational Refinement for Importance Sampling Using the Forward
Kullback-Leibler Divergence [77.06203118175335]
変分推論(VI)はベイズ推論における正確なサンプリングの代替として人気がある。
重要度サンプリング(IS)は、ベイズ近似推論手順の推定を微調整し、偏りを逸脱するためにしばしば用いられる。
近似ベイズ推論のための最適化手法とサンプリング手法の新たな組み合わせを提案する。
論文 参考訳(メタデータ) (2021-06-30T11:00:24Z) - Adversarial and Contrastive Variational Autoencoder for Sequential
Recommendation [25.37244686572865]
本稿では、逐次レコメンデーションのためのAdversarial and Contrastive Variational Autoencoder (ACVAE) と呼ばれる新しい手法を提案する。
まず,本モデルが高品質な潜在変数を生成することを可能にするadversarial variational bayesフレームワークの下で,シーケンス生成のためのadversarial trainingを導入する。
さらに、シーケンスをエンコードする場合、シーケンス内のグローバルおよびローカルの関係をキャプチャするために、繰り返しおよび畳み込み構造を適用します。
論文 参考訳(メタデータ) (2021-03-19T09:01:14Z) - Sequential Recommendation with Self-Attentive Multi-Adversarial Network [101.25533520688654]
逐次レコメンデーションにおける文脈情報の影響を明示的にモデル化するためのMFGAN(Multi-Factor Generative Adversarial Network)を提案する。
当社のフレームワークは,複数種類の因子情報を組み込むことが柔軟であり,各因子が推奨決定にどのように貢献するかを時間とともに追跡することができる。
論文 参考訳(メタデータ) (2020-05-21T12:28:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。