論文の概要: Fusion and Alignment Enhancement with Large Language Models for Tail-item Sequential Recommendation
- arxiv url: http://arxiv.org/abs/2604.03688v1
- Date: Sat, 04 Apr 2026 11:19:08 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-07 15:49:18.724669
- Title: Fusion and Alignment Enhancement with Large Language Models for Tail-item Sequential Recommendation
- Title(参考訳): 重み付き逐次推薦のための大規模言語モデルによる融合とアライメントの強化
- Authors: Zhifu Wei, Yizhou Dang, Guibing Guo, Chuang Zhao, Zhu Sun,
- Abstract要約: Sequential Recommendation (SR)は、過去のインタラクションシーケンスからユーザの好みを学習し、パーソナライズされた提案を提供する。
大きな言語モデル(LLM)は、アイテム間のセマンティックな関係をキャプチャすることで、有望なソリューションを提供する。
LLMを用いたFAERec(Tail-item Sequential Recommendation)のためのFusion and Alignment Enhancement frameworkを提案する。
- 参考スコア(独自算出の注目度): 17.14852109587492
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Sequential Recommendation (SR) learns user preferences from their historical interaction sequences and provides personalized suggestions. In real-world scenarios, most items exhibit sparse interactions, known as the tail-item problem. This issue limits the model's ability to accurately capture item transition patterns. To tackle this, large language models (LLMs) offer a promising solution by capturing semantic relationships between items. Despite previous efforts to leverage LLM-derived embeddings for enriching tail items, they still face the following limitations: 1) They struggle to effectively fuse collaborative signals with semantic knowledge, leading to suboptimal item embedding quality. 2) Existing methods overlook the structural inconsistency between the ID and LLM embedding spaces, causing conflicting signals that degrade recommendation accuracy. In this work, we propose a Fusion and Alignment Enhancement framework with LLMs for Tail-item Sequential Recommendation (FAERec), which improves item representations by generating coherently-fused and structurally consistent embeddings. For the information fusion challenge, we design an adaptive gating mechanism that dynamically fuses ID and LLM embeddings. Then, we propose a dual-level alignment approach to mitigate structural inconsistency. The item-level alignment establishes correspondences between ID and LLM embeddings of the same item through contrastive learning, while the feature-level alignment constrains the correlation patterns between corresponding dimensions across the two embedding spaces. Furthermore, the weights of the two alignments are adjusted by a curriculum learning scheduler to avoid premature optimization of the complex feature-level objective. Extensive experiments across three widely used datasets with multiple representative SR backbones demonstrate the effectiveness and generalizability of our framework.
- Abstract(参考訳): Sequential Recommendation (SR)は、過去のインタラクションシーケンスからユーザの好みを学習し、パーソナライズされた提案を提供する。
現実のシナリオでは、ほとんどの項目は、テール・イテム問題(tail-item problem)として知られるスパース相互作用を示す。
この問題は、アイテム遷移パターンを正確にキャプチャするモデルの能力を制限する。
これを解決するために、大きな言語モデル(LLM)は、アイテム間のセマンティックな関係をキャプチャすることで、有望なソリューションを提供する。
LLM由来の埋め込みを活用してテールアイテムを豊かにする以前の取り組みにもかかわらず、以下の制限に直面している。
1) 協調的な信号と意味的知識を効果的に融合させることに苦慮し, 副次的項目の埋め込み品質が向上した。
2) 既存の手法では, ID と LLM の埋め込み空間間の構造的不整合性を見落とし,推奨精度を低下させるコンフリクト信号が生じる。
そこで本研究では,階層型および構造的に整合した埋め込みを生成することで,項目表現の改善を図るためのILMを用いた統合・アライメント拡張フレームワークを提案する。
情報融合の課題として,IDとLLMの埋め込みを動的に融合する適応ゲーティング機構を設計する。
そこで本稿では,構造的不整合を緩和するための二重レベルアライメント手法を提案する。
項目レベルのアライメントは、対照的な学習を通して同一項目のIDとLLM埋め込みの対応を確立し、特徴レベルのアライメントは2つの埋め込み空間をまたいだ対応する次元間の相関パターンを制約する。
さらに、2つのアライメントの重みをカリキュラム学習スケジューラで調整し、複雑な特徴レベルの目標の早期最適化を回避する。
複数の代表的なSRバックボーンを持つ3つの広く使われているデータセットに対する大規模な実験は、我々のフレームワークの有効性と一般化性を実証している。
関連論文リスト
- DMESR: Dual-view MLLM-based Enhancing Framework for Multimodal Sequential Recommendation [13.114773060703891]
マルチモーダルシーケンスレコメンデーション(DMESR)のためのデュアルビューMLLMベースのエンハンシングフレームワークを提案する。
ここでは,MLLM が生成する言語間の意味表現の整合に,コントラスト学習機構を用いる。
細粒度セマンティクスを欠くために,MLLMから得られた粗粒度セマンティクスと細粒度テキストセマンティクスを統合したクロスアテンション融合モジュールを導入する。
論文 参考訳(メタデータ) (2026-02-14T10:42:56Z) - The Best of the Two Worlds: Harmonizing Semantic and Hash IDs for Sequential Recommendation [51.62815306481903]
我々は,SIDとHIDを調和させる新しいフレームワークであるtextbfnameを提案する。具体的には,HIDのユニークなコラボレーティブアイデンティティを保ちながら,SID内のマルチグラニュラーセマンティクスの両方をキャプチャ可能な,デュアルブランチモデリングアーキテクチャを考案する。
実世界の3つのデータセットの実験では、名前は、既存のベースラインを越えながら、頭と尾の両方の推奨品質のバランスをとる。
論文 参考訳(メタデータ) (2025-12-11T07:50:53Z) - Empowering Large Language Model for Sequential Recommendation via Multimodal Embeddings and Semantic IDs [28.752042722391934]
シークエンシャルレコメンデーション(SR)は,ユーザの動的関心や時系列パターンを過去のインタラクションに基づいて捉えることを目的としている。
MME-SIDは多モード埋め込みと量子埋め込みを統合し、埋め込み崩壊を緩和する。
3つの公開データセットに対する大規模な実験により、MME-SIDの優れた性能が検証された。
論文 参考訳(メタデータ) (2025-09-02T07:02:29Z) - LLM2Rec: Large Language Models Are Powerful Embedding Models for Sequential Recommendation [49.78419076215196]
シーケンスレコメンデーションは、類似したユーザやアイテムの履歴行動から協調フィルタリング(CF)信号をモデル化することで、ユーザの将来のインタラクションを予測することを目的としている。
従来のシーケンシャルなレコメンダは、高次の共起パターンを通じてCF信号をキャプチャするIDベースの埋め込みに依存している。
大規模言語モデル(LLM)の最近の進歩は、テキスト記述からアイテム表現を導出するテキストベースのレコメンデーションアプローチを動機付けている。
理想的な埋め込みモデルは、ドメイン内およびドメイン外のレコメンデーションパフォーマンスを改善するために、CF信号とリッチなセマンティック表現をシームレスに統合すべきである、と我々は主張する。
論文 参考訳(メタデータ) (2025-06-16T13:27:06Z) - Full-Stack Optimized Large Language Models for Lifelong Sequential Behavior Comprehension in Recommendation [44.685176786857284]
データ、プロンプト、パラメータレベルの最適化を提供するフレームワークであるReLLaX(Retrieval-enhanced Large Language Model Plus)を提案する。
データレベルではSemantic User Behavior Retrieval (SUBR)を導入し、シーケンスの不均一性を低減し、LLMがキー情報を抽出しやすくする。
素早いレベル向上のために、我々はSPA(Soft Prompt Augmentation)を用いて協調的な知識を注入し、項目表現をレコメンデーションタスクと整合させる。
パラメータレベルでは、コンポーネント間の相互作用を有効にすることで、LoRAの表現性を向上するComponent Fully-Interactive LoRA(CFLoRA)を提案する。
論文 参考訳(メタデータ) (2025-01-23T03:05:13Z) - Break the ID-Language Barrier: An Adaption Framework for LLM-based Sequential Recommendation [13.047167114638285]
ドメイン固有知識に富んだ事前学習ID埋め込みを,大規模言語モデルに統合するフレームワークであるIDLE-Adapterを提案する。
IDLE-Adapterはブリッジとして機能し、疎いユーザ-イテムインタラクションデータを高密度でLLM互換の表現に変換する。
論文 参考訳(メタデータ) (2024-11-27T11:59:44Z) - Beyond Inter-Item Relations: Dynamic Adaption for Enhancing LLM-Based Sequential Recommendation [83.87767101732351]
逐次リコメンデータシステム(SRS)は,ユーザの過去のインタラクションシーケンスに基づいて,ユーザが好む次の項目を予測する。
様々なAIアプリケーションにおける大規模言語モデル(LLM)の台頭に触発されて、LLMベースのSRSの研究が急増している。
我々は,大きめの粒度適応の上に構築された逐次レコメンデーションモデルであるDARecを提案する。
論文 参考訳(メタデータ) (2024-08-14T10:03:40Z) - Learnable Item Tokenization for Generative Recommendation [113.80559032128065]
LETTER (Larnable Tokenizer for generaTivE Recommendation) を提案する。
LETTERは、セマンティック正規化のためのResidual Quantized VAE、協調正規化のためのコントラストアライメント損失、コードの割り当てバイアスを軽減するための多様性損失を組み込んでいる。
論文 参考訳(メタデータ) (2024-05-12T15:49:38Z) - Contrastive Self-supervised Sequential Recommendation with Robust
Augmentation [101.25762166231904]
Sequential Recommendation Describes a set of technique to model dynamic user behavior to order to predict future interaction in sequence user data。
データスパーシリティやノイズの多いデータなど、古くて新しい問題はまだ残っている。
逐次レコメンデーション(CoSeRec)のためのコントラスト型自己監督学習を提案する。
論文 参考訳(メタデータ) (2021-08-14T07:15:25Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。